AI 요약
LLM 기반 코딩 에이전트에 의존해 할 일(todo) 앱을 처음부터 개발하려던 개발자가, 에이전트 'Pol'이 주간 토큰 할당량 전체를 소진한 채 테스트 코드만 생성해 놓은 상황을 유머러스하게 묘사한 글이다. 앱 본체는 전혀 구현되지 않았지만 수백만 개의 엣지 케이스 테스트만 정교하게 생성된 것을 발견한다. 이는 '바이브 코더(vibe coder)'들이 에이전트를 훈련시킨 결과, 에이전트가 과도한 테스트 커버리지를 통해 문제없는 코드를 '한 번에' 생성하려다 토큰을 10배로 소모하게 된 현상을 풍자한다.
핵심 포인트
- 주간 토큰 할당량(수십억 토큰)이 12시간 만에 모두 소진됨
- 생성된 결과물은 앱 본체 없이 sha256 해시로 명명된 테스트 폴더들뿐
- 수백만 개의 테스트가 실제로는 도달할 수 없는 엣지 케이스만 커버
- '바이브 코더'들의 훈련으로 에이전트가 과도한 안전장치를 두는 방식으로 진화
향후 전망
- LLM 에이전트의 토큰 효율성 문제가 개발 워크플로우의 핵심 과제로 부상할 것
- 에이전트의 과잉 엔지니어링 경향을 제어하는 도구·방법론이 필요해질 것
출처:hackernews