메타 뮤즈, 말 끊고 요청 바꾼다…미국에 음성⁠·⁠표정 아바타

메타가 개인 AI 에이전트 ‘뮤즈’에 실시간 음성과 표정이 움직이는 아바타를 미국부터 순차 제공한다고 11월 5일 밝혔다. 모바일·웹·Mac에서 대화하다가 말을 끊고 요청을 바꿀 수 있다. 음성만 듣거나 아바타를 대화 옆 또는 전체 화면에 표시하는 방식도 고를 수 있다.

회사는 9월 Connect에서 긴 대화를 나누는 동안에도 뮤즈가 일을 이어가는 모습을 예고했다. 이번 발표는 그 대화 방식을 앱에 배포하는 단계다. 당시 소개한 안경 연동은 사용자가 보고 있는 물건을 에이전트에게 설명하는 수고를 줄이는 방향으로 제시됐으며, 음성 대화와 기기 연동의 일정은 각각 구분돼 있다.

음성과 아바타를 맞추는 기반 기술은 9월 23일 공개됐다. 음성 모델이 내보내는 발화 정보가 소리와 영상 양쪽에 함께 전달돼 입 모양과 말투를 맞춘다. 아바타 영상은 짧은 조각을 차례로 생성하고, 직전에 만든 움직임을 다음 조각의 맥락으로 이어 쓴다. 회사는 이 방식으로 대화가 길어져도 외형과 움직임의 연속성을 유지한다고 설명했다.

당시 회사가 제시한 연구 시스템은 세로 448×768 영상, 초당 25프레임을 지원했다. 이용자가 발화를 마친 뒤 동기화된 소리·영상의 첫 데이터를 받을 때까지 약 870밀리초가 걸렸다는 자체 측정이다. 회사는 연구 예시 전체가 앱에서 선택 가능한 아바타를 뜻하는 것은 아니라고 명시했다. 생성 영상의 출처를 추적할 수 있도록 눈에 보이지 않는 워터마크를 넣는 방식도 기술 문서에 포함됐다.

대화 중 맡긴 일과 실행 승인의 경계

음성으로 요청을 받는 대상은 이미 여러 일을 이어서 처리하도록 설계된 에이전트다. 메타의 9월 제품 설계 설명에 따르면 뮤즈는 목표를 받은 뒤 일정이나 관련 사건에 맞춰 후속 작업을 진행한다. 대화 중 새 요청을 보내거나 이전 요청에 끼어들 수도 있다. 작업 결과가 새롭거나 이용자의 입력이 필요하다고 판단할 때 알림을 보낸다는 설명이다.

작업을 살피는 화면도 기존 설계에 포함돼 있다. 아바타 아래에는 진행 중인 일의 일부를 보여 주고, 전체 활동 기록과 승인한 권한을 따로 확인하도록 했다. 장기 목표와 계획은 목표 화면에 모으며, 기억 파일은 이용자가 직접 읽고 편집할 수 있다고 설명했다.

외부 서비스에서 행동할 권한은 별도 승인 장치가 판단한다. 9월 공개한 보안 설명은 연결 서비스와 목적, 요청 범위에 따라 허용·거부·이용자 확인을 결정한다고 밝혔다. 확인이 필요하면 실행을 멈추고 대화창의 답변과 별개인 승인 화면을 제시한다. 이용자의 선택은 해당 행동을 허용하거나 거절하는 데 직접 반영된다. 문서는 승인 화면의 결정을 대화 속 제안이 아닌, 정해진 범위에 묶인 실행 권한으로 설명했다.

승인은 한 번의 요청이나 세션, 특정 작업, 정해진 기간 등으로 범위를 묶을 수 있다. 기존에 허용된 읽기 작업이나 위험이 낮은 행동은 중단 없이 이어갈 수 있다는 설명이다. 계정의 실제 인증 정보는 에이전트가 실행하는 작업 영역과 분리해 보관하고, 승인된 외부 요청이 나가는 지점에 넣는 방식으로 설계했다.

현재 제품 소개는 이용자와 에이전트가 전용 클라우드 컴퓨터와 브라우저를 함께 쓰며, 이용자가 작업에 개입할 수 있다고 안내한다. 자료를 보관할 공간과 실제 작업을 처리할 컴퓨팅 자원을 갖춘 환경이다. 이메일·일정 같은 앱을 연결하고, 요청한 일을 수행하는 데 필요한 도구가 없으면 에이전트가 직접 도구를 만든다는 내용도 담겼다.

연결하는 앱으로는 이메일과 일정, 인스타그램을 들고 있다. 각 앱에서 에이전트가 볼 정보와 수행할 행동은 이용자가 정한다. 메타는 뮤즈와 나눈 대화를 자사 광고 시스템에 공유하지 않는다고 안내했다.

미국 App Store의 뮤즈 앱은 18세 이상 등급이며, iPhone은 iOS 18.0 이상, iPad는 iPadOS 18.0 이상을 요구한다. 앱은 무료 다운로드와 앱 내 구매가 있는 상품으로 표시돼 있다.

Connect에서 소개한 ‘뮤즈 참’은 주머니에 넣을 수 있는 기기에 에이전트와 실시간 음성을 담는 구상이다. 메타는 당시 그해 안에 추가 내용을 알리겠다고 밝혔다. 11월 5일 공지에서 AI 안경과 뮤즈 참은 음성 대화가 곧 제공될 대상으로 남았다. 구체적인 시작 날짜는 제시하지 않았다.