에이전트 핸즈: XR 속 공간 기반 대화를 위한 인터랙티브 손동작 생성 기술

Google XR이 CHI 2026에서 발표한 AgentHands는 LLM 기반 XR 프로토타입으로, 대화형 에이전트에 동기화된 손동작을 부여하여 공간 기반 안내를 제공한다. 이는 2D 화면의 한계를 넘어 몰입형 환경에서 자연스러운 상호작용을 가능하게 한다.

AI 요약

Google Research가 CHI 2026에서 발표한 AgentHands는 LLM 기반 XR 프로토타입으로, 대화형 AI 에이전트에 동기화된 표현력 있는 손동작을 부여하여 공간 기반 안내를 제공합니다. 이 기술은 사용자의 물리적 작업에서 정신적 매핑 격차를 해소하고 참여도를 높이는 것을 목표로 합니다. Google의 XR 및 HCI 전문가들과의 형성 연구를 통해 가상 손의 '가독성'을 정의하는 다차원 분류 체계를 개발했으며, 손 사용 방식, 공간성, 시간적 역학 및 시각 효과를 포함합니다.

핵심 포인트

  • AgentHands는 CHI 2026에 게재된 연구로, XR 환경에서 AI 에이전트의 공동 발화 제스처 구현
  • 손동작 분류 체계: 한 손/두 손 사용, 팜(주의), 실린더 그립(도구 모방) 등 제스처 라이브러리 구축
  • 공간성 활용: 중앙 공중(일반 대화), 객체 고정(특정 부품 식별), 사용자 상대(사회적 신호) 등 3가지 공간 유형
  • 시각 효과(VFX) 활용: '붓기', '추적' 같은 애니메이션 동작과 열기 신호를 나타내는 빨간 글로우 효과 등 적용

향후 전망

  • Android XR과 같은 몰입형 플랫폼에서 AI 어시스턴트의 공간 인식 대화 경험을 혁신할 것으로 기대
  • Project Astra, Gemini 3.1 Flash Live와 같은 실시간 멀티모달 AI와 결합하여 더 자연스러운 XR 상호작용 구현 가능
Share

이것도 읽어보세요

댓글

이 소식에 대한 의견을 자유롭게 남겨주세요.

댓글 (0)

불러오는 중...