AI 요약
ModelRift가 코드 기반 CAD 도구인 OpenSCAD와 CadQuery를 AI 에이전트가 자율적으로 구동할 때 어떤 차이가 있는지 비교 벤치마크를 수행했다. Claude Opus 5(1M 컨텍스트)를 사용한 6개 에이전트가 3개 과제를 두 도구로 수행했고, 모든 결과물은 독립 파서로 검증됐다. 결론적으로 두 도구 모두 인쇄 가능한 부품을 만들어냈으며, 능력 자체보다는 "실패하는 방식"에서 차이가 드러났다. 가장 어려운 과제는 양쪽 모두 해결했다.
핵심 포인트
- 6개 에이전트 × 3개 과제 × 2개 도구(OpenSCAD 2026.06.12, CadQuery 2.8.0/Python 3.14)로 구성, M-시리즈 Mac에서 실행
- 에이전트당 최대 12개 버전으로 제한, 실패 시 원문 오류 텍스트 보고 의무화, 무인 실행
- 최종 STL은 삼각형 수·바운딩 박스·체적·수밀성·비다양체·경계 엣지·뒤집힌 면·연결 요소를 검사하는 독립 파서로 검증
- 스킬 파일 크기는 OpenSCAD 12.4KB, CadQuery 13.1KB이며 CadQuery에는 API 치트시트가 추가됨
향후 전망
- 코드 기반 CAD에서 AI 에이전트 활용 가능성이 입증됐으나, 도구별 실패 모드에 대한 추가 연구 필요
- 향후 더 복잡한 형상·다중 부품 어셈블리로 벤치마크 확장 가능성
출처:Hacker News