AI 요약
한 연구자가 피부암(흑색종) 진단 과제에서 10년 된 합성곱 신경망(Inception v3)이 최신 프런티어 LLM인 GPT-6 Astra와 Claude Fable 5.1을 능가했다는 실험 결과를 공개했다. 생검으로 확진된 200개 병변(방출 불가 100개·방출 가능 100개)을 대상으로 6개 진단 중 정답을 맞힌 비율은 CNN이 62%(125개), LLM은 각각 42%(84·85개)였다. 특히 두 LLM 모두 흑색종을 지루성 각화증으로 오진해 '방출 가능'으로 판정한 사례가 있었다. CNN은 일상 사진으로 사전학습된 뒤 공개 피부과 이미지로 약 20분간 파인튜닝된, 의도적으로 최신 기술이 아닌 모델이었다.
핵심 포인트
- 테스트셋: MILK10k 기반 생검 확진 200개 병변(흑색종 30·기저세포암 25·편평세포암 25·광선각화증 20·양성모반 50·지루성각화증 50)
- 정답률: CNN 62%(125/200) vs GPT-6 Astra 42%(84), Claude Fable 5.1 42%(85)
- 두 LLM 모두 침습성 흑색종을 지루성 각화증으로 오진해 방출 판정
- CNN은 2015년 공개된 Inception v3를 약 20분 파인튜닝한 모델
향후 전망
- 의료 영상 진단에서 범용 LLM보다 과제 특화 소형 모델의 우위 가능성 부각
- LLM의 의료 오진 위험에 대한 검증·규제 논의 확대 예상
