AI 요약
Warp의 CEO Zach Lloyd는 Slack, Linear, GitHub 등에서 들어온 요청을 추적·테스트된 풀 리퀘스트(PR)로 자동 전환하는 클라우드 기반 'AI 소프트웨어 팩토리' 전략을 공개했다. Warp는 이 시스템을 통해 월 2,000개의 PR을 처리하며, PR당 인간 개입 횟수를 자동화·처리량의 핵심 지표로 삼는다. LLM-as-a-judge로 모든 에이전트 실행을 채점하고 실패 모드를 분석해 워크플로를 자체 개선하며, 모델별 비용·품질 트레이드오프를 파레토 차트로 관리한다. 인간 리뷰는 여전히 병목으로 남아 있다.
핵심 포인트
- Warp는 Slack → Linear → GitHub → QA로 이어지는 공개 워크플로를 통해 월 2,000개 PR을 처리
- LLM-as-a-judge로 모든 에이전트 실행을 채점하고, 실패한 실행에서 팩토리가 스스로 개선
- PR당 비용을 모델 구성별로 추적하고, 비용-품질 파레토 차트로 모델 선택
- Figma MCP, Granola MCP, Grok Bot 등 다양한 도구를 CEO 업무에도 활용
향후 전망
- 인간 리뷰 병목을 줄이는 방향으로 코드 리뷰 자동화가 진화할 전망
- 소프트웨어 팩토리 모델이 다른 엔지니어링 조직으로 확산될 가능성
출처:lennys_newsletter