AI 요약
1인 개발자인 Christopher Meiklejohn은 웹 버전 'Zabriskie'를 넘어 iOS와 Android 플랫폼으로 확장하며 겪은 테스트의 어려움을 해결하기 위해 Claude AI를 도입했습니다. React와 Capacitor 기반의 단일 코드베이스를 사용했음에도 불구하고, 웹용 Playwright와 네이티브용 XCTest/Espresso 사이의 기술적 간극으로 인해 모바일 앱 QA가 불가능한 'No-man's-land' 문제가 발생했습니다. 개발자는 Claude가 직접 에뮬레이터를 구동하고 스크린샷을 찍어 분석한 뒤 버그를 리포팅하도록 학습시켰습니다. 이 과정에서 Android는 90분 만에 설정이 완료되었으나 iOS는 6시간이 넘게 소요되어 자동화 도구의 격차를 보여주었습니다. 결과적으로 AI 에이전트를 활용해 1인 개발 환경에서도 3개 플랫폼의 품질을 유지할 수 있는 새로운 경로를 제시했습니다.
핵심 인사이트
- 플랫폼별 자동화 소요 시간: Android는
adb reverse와 Chrome DevTools Protocol 덕분에 90분 만에 완료된 반면, iOS는 폐쇄적인 생태계로 인해 6시간 이상 소요됨. - 테스트 사각지대 발견: Capacitor 기반 하이브리드 앱은 웹 도구(Playwright)와 네이티브 도구(XCTest, Espresso)가 모두 접근하기 어려운 기술적 틈새에 위치함.
- 서버 중심 UI 아키텍처: 백엔드에서 화면 레이아웃을 JSON으로 전송하여 앱 스토어 리뷰 없이 3개 플랫폼의 UI를 동시 제어함.
- AI의 한계와 개입: Claude가 'dead lyrics' 검색 시 콘텐츠 필터링 정책(API 400 에러)에 걸려 개발자가 직접 Grateful Dead의 가사를 선정하는 수동 개입이 발생함.
주요 디테일
- 기존 테스트 규모: 웹 버전은 이미 150개 이상의 Playwright E2E 테스트를 통해 매 푸시마다 검증되고 있었음.
- Android 기술적 해결책:
adb reverse를 사용하여 에뮬레이터 내의 localhost 요청을 호스트 Mac의 포트(3000, 8080)로 리다이렉트함. - WebView 제어: Android WebView가 노출하는 Chrome DevTools Protocol 소켓을 로컬 포트로 포워딩하여 AI가 내부 HTML 구조를 파악할 수 있게 함.
- 개발 철학: '앱 스토어에 없으면 존재하지 않는 것'이라는 인식을 바탕으로 단일 개발자가 3개 플랫폼을 유지하기 위해 AI QA를 선택함.
- 오류 사례: AI 자동화 과정에서 발생한 API Error 400 (invalid_request_error)은 AI의 검색 기능이 특정 단어 필터링에 민감함을 보여줌.
향후 전망
- AI QA 에이전트의 확산: 1인 개발자나 소규모 팀에서 복잡한 모바일 QA를 수행하기 위해 Claude와 같은 멀티모달 AI를 활용하는 사례가 늘어날 것임.
- 하이브리드 앱 도구의 발전: 웹과 네이티브를 동시에 검증할 수 있는 AI 기반의 새로운 통합 테스트 프레임워크 등장이 예상됨.