텐센트 위안바오, 음성 통화에서 신청곡 부른다

텐센트가 11월 13일 실시간 음성 모델 ‘Hy Realtime’을 공개하고 AI 비서 위안바오(Yuanbao)의 음성 통화에 적용했다. 위안바오 공식 계정은 통화 상대인 AI에게 말로 곡을 요청하면 노래를 들을 수 있다고 밝혔다. 새 모델은 앞서 나눈 이야기를 바탕으로 짧은 질문에도 답하도록 설계됐다.

위안바오가 공개한 적용 대상은 최신 앱의 ‘자유 대화’ 모드에서 고를 수 있는 ‘추위(初语)’ 음성이다. 음성 통화는 업데이트 전부터 위안바오에 있던 기능이다. 애플 중국 앱스토어에 올라온 텐센트의 앱 설명에는 일상 대화용 음성 통화와 QQ뮤직 연동 재생이 각각 별도 기능으로 올라와 있다. 이번에 바뀐 것은 그중 자유 대화에서 추위 음성으로 주고받는 응답이다.

곡 제목을 몰라도 조건으로 신청

중국 기술 매체 IT홈(IT之家)에 게재된 혼위안 팀의 설명에 따르면 노래 기능은 텐센트뮤직의 링인 AI 팀과 함께 개발했다. 곡을 고를 때는 가수나 앨범 이름, 장르, 언어, 발표 시기 같은 조건을 조합할 수 있다. 예를 들어 특정 시기에 나온 영어 포크 음악을 말로 요청하면 모델이 조건에 맞는 곡을 골라 부르는 방식이다. 같은 통화에서 조건을 덧붙여 다음 곡을 찾는 것도 지원한다.

위안바오는 이전부터 음악을 듣는 통로로도 쓰였다. 텐센트뮤직은 3월 실적 발표에서 QQ뮤직을 위안바오에 연결해 앱에서 음악을 들을 수 있도록 했다고 설명했다. 당시 공개한 QQ뮤직의 AI 비서는 이용자가 일상적인 표현으로 요청하면 곡을 찾아 주거나 디지털 앨범에 접근할 수 있게 했다. 이번 발표에서 소개한 것은 위안바오 통화에서 AI가 직접 부르는 응답이다. 공개 설명에는 부를 수 있는 곡 전체 목록이나 한 곡을 얼마나 길게 부르는지에 대한 안내가 없다.

앞선 대화를 바탕으로 검색 여부 판단

혼위안 팀이 공개한 도구 호출 사례는 웹 검색이다. 말로 받은 요청과 앞뒤 대화를 바탕으로 인터넷 검색이 필요한지 판단하고, 검색이 필요하면 도구를 호출해 결과를 답변에 반영한다. 위안바오 앱 설명에는 이미 글이나 음성으로 질문할 수 있는 검색 기능이 소개돼 있다. 새 모델 발표는 음성 통화 안에서 모델이 검색 여부를 직접 정하는 과정에 초점을 맞췄다.

위안바오 공식 게시물에는 앞서 한 말을 기억해 맥락을 이어 가는 사례도 있다. 모의 면접에서 사용자가 답변 도중 막히면 앞서 이야기한 내용을 토대로 후속 질문이나 단서를 준다는 설명이다. 한 문장을 끝내기 전에 말을 고쳐도 앞뒤 발언을 함께 해석한다는 것이 혼위안 팀의 설명이다. 이 사례는 통화가 이어지는 동안의 맥락 활용을 보여 준다. 위안바오 공식 계정은 대화 주제를 놓쳤을 때 앞선 내용을 되짚는 예도 소개했다. 통화가 끝난 뒤에도 개인별로 내용을 기억하게 하는 기능은 혼위안 팀이 후속 개선 과제로 제시했다.

웹 시연과 기업용 API

텐센트 클라우드는 Hy Realtime이라고 표시된 웹 시연 페이지를 별도로 제공한다. 공개 화면에 쓰이는 문구에는 마이크 설정과 자막 표시 옵션이 나온다. 시연을 시작할 때는 브라우저의 마이크 권한이 필요하다. 검색 기능을 켜면 도우미가 외부 정보를 찾아 답할 수 있으며, 화면 안내에 따르면 검색 설정을 바꾸려면 진행 중인 통화를 먼저 끝내야 한다. 시연은 한 번에 최대 10분으로 표시된다.

시연 화면은 도우미가 듣는 중인지, 답변을 준비하는 중인지도 구분해 보여 준다. AI가 말하는 동안에는 말을 시작하거나 화면 버튼으로 응답을 끊을 수 있다고 안내한다. 마이크가 꺼져 있으면 화면에 별도로 표시된다. 시연은 일정 시간 소리가 감지되지 않으면 통화를 자동으로 종료한다는 문구도 표시한다.

혼위안 팀은 텐센트 고객센터에도 모델이 들어갔다고 밝혔다. 고객센터에서 어떤 문의에 적용되는지, 위안바오의 노래나 검색 기능이 고객센터에서도 제공되는지는 발표 자료에 나오지 않는다. 두 곳 모두 텐센트가 운영하는 서비스다. 외부 서비스에 붙일 수 있는 개발자용 API는 텐센트 클라우드를 통해 제공할 예정이며 공개 날짜와 요금은 이번 발표에서 제시하지 않았다.

텐센트 클라우드의 기존 음성 대화 문서는 여러 모델을 연결하는 방식과 텐센트 자체 음성 모델 옵션을 안내한다. 이 문서가 안내하는 범위는 기존 음성 대화 서비스다. 새 Hy Realtime API의 모델 식별자와 접속 요건은 아직 공개되지 않았다.