AI가 정말 Windows 전체를 혼자 만들 수 있을까? 무감독 실험을 해봤다

“Cursor 팀이 수백 개 에이전트로 수 주간 120만 줄 규모의 Windows 7 시뮬레이터와 100만 줄 브라우저를 생성하고, OpenAI는 3~7인 팀이 Codex Agent Loop로 5개월간 약 1,500개 PR을 병합해 100만 줄을 생산한 사례가 공개됐다. 필자가 무감독 무한 루프 프레임워크 AutoForge를 실험한 결과 에이전트는 국소 최적점에 갇히는 '수렴' 또는 방향 없이 확산되는 '발산' 실패를 보였다. 결론은 병목이 모델 능력이 아니라 구조·도구·피드백, 즉 가이드와 센서로 구성된 하네스에 있다는 것이다.”

AI 요약

Cursor 팀이 수백 개 Agent로 수 주간 120만 줄 Windows 7 시뮬레이터와 100만 줄 브라우저를 만들고, OpenAI가 5개월간 Agent Loop로 100만 줄 코드를 생산한 사례를 검증하기 위해 저자가 무감독 자율 개발 프레임워크 AutoForge를 제작했다. 실험 결과 '수렴(주의력 붕괴)'과 '발산(주의력 확산)'이라는 두 가지 실패 모드가 나타났으며, 무한 시간과 무한 자유가 무한 능력으로 이어지지 않음을 확인했다. 저자는 병목이 모델 능력이 아니라 구조·도구·피드백 메커니즘, 즉 '하네스(harness)'의 부재에 있다고 결론지었다.

핵심 포인트

  • Cursor 팀은 약 1,000개 파일·100만 줄 이상 브라우저, 14,600 커밋·120만 줄 Windows 7 시뮬레이터, 12,000 커밋·160만 줄 Excel 엔진을 생성했다.
  • OpenAI는 3~7인 팀이 Codex Agent Loop로 5개월간 약 1,500개 PR, 100만 줄 코드를 무수기 작성으로 생산했다.
  • AutoForge v0 실험에서 Agent는 시간이 지나면 주의력이 국소 최적점으로 붕괴(수렴)하거나 방향 없이 확산(발산)하는 두 실패 모드를 보였다.
  • 해결책으로 Analyst·Builder·Reviewer 3역할 파이프라인과 권한 격리 등 harness 메커니즘을 도입했다.

향후 전망

  • Agent = Model + Harness 관점에서 프롬프트·컨텍스트 엔지니어링을 포괄하는 '하네스 엔지니어링'이 핵심 학문으로 부상할 전망이다.
  • Planner-Worker 계층 구조 등 제약 설계가 자율 코딩 Agent의 실용화를 좌우할 것이다.
Share

이것도 읽어보세요

댓글

이 소식에 대한 의견을 자유롭게 남겨주세요.

댓글 (0)

불러오는 중...