딥엘 오러, 한국어 실시간 음성 번역에 억양⁠·⁠강세 반영

딥엘(DeepL)이 11월 11일 실시간 음성 번역 모델 오러(Aure)를 공개했다. 딥엘은 새 모델이 발화 도중 달라지는 억양과 강세, 말의 속도를 번역 음성에 반영한다고 밝혔다. 한국어를 포함한 8개 언어에 먼저 적용된다. 대화 상대는 자신이 선택한 언어로 번역을 들으면서 화자의 전달 방식도 함께 들을 수 있게 됐다.

딥엘은 온라인 회의, 대면 대화, 음성 API의 지원 언어에 오러를 자동 적용한다고 밝혔다. 첫 지원 언어는 한국어, 영어, 독일어, 스페인어, 프랑스어, 이탈리아어, 일본어, 포르투갈어다. 다른 언어의 음성 번역에는 기존 모델을 계속 쓴다. 딥엘 보이스 전체가 제공하는 전사, 자막, 번역 음성의 범위는 각각 다르며, 예를 들어 중국어는 기존 번역 음성 목록에도 있다.

대화 초반에 정한 말투를 발화 중에도 조정

딥엘은 9월 음성 보존 기능을 공개하며 여러 사람이 말할 때 번역을 듣고도 화자를 구분할 수 있다고 설명했다. 당시 제품은 대화 앞부분에서 얻은 음성 표본을 기준으로 번역 음성의 특성을 정했다. 딥엘에 따르면 오러는 번역된 문장과 들어오는 원음으로 문장마다 전달 방식을 조정한다. 같은 화자가 뒤에서 더 빠르게 말하거나 특정 낱말을 강조하면 번역 음성에도 그 변화가 반영되는 방식이다.

음성을 듣는 사람이 화자를 알아볼 수 있게 하는 기능의 이름은 스피커 매치다. 딥엘은 현재 대화에서 받은 음성을 임시로 사용하고 세션이 끝나면 그 표본을 버린다고 설명한다. 미리 음성 파일을 제출해 여러 회의에 걸쳐 쓰는 프로필을 만드는 절차는 없다. 도움말에는 화자가 번역 음성의 스피커 매치 적용을 켜고 끌 수 있는 설정도 안내돼 있다.

회의에서는 번역 자막과 음성의 이용 조건이 다르다

딥엘 보이스는 마이크로소프트 팀즈와 줌, 구글 미트 회의에서 쓸 수 있다. 회의를 연결하면 딥엘 봇이 참가자로 들어와 음성을 받아 번역하고 채팅으로 번역 화면 링크를 보낸다. 회사가 설명한 회의 요건에는 외부 참가자 입장과 회의 채팅 허용이 포함된다. 참가자는 전용 창에서 자신이 사용할 언어를 고른다. 딥엘은 회의당 최대 300명을 지원한다. 소회의실로 나뉜 뒤에는 각 소회의실에 회의 번역을 제공하지 않는다.

온라인 회의에서 번역을 음성으로 들으려면 청취자마다 지원되는 보이스 라이선스와 딥엘 보이스 데스크톱 앱이 필요하다. 자막의 경우 회의를 연결하는 담당자 한 명에게 라이선스가 필요하고, 자막을 읽는 다른 참가자는 계정이나 구독 없이 링크로 볼 수 있다. 음성 번역에 사용한 분량은 회의를 연결한 담당자의 제공 시간에서 차감된다. 듣는 사람에게 별도 라이선스가 필요해도 청취자 각자의 제공 시간에서는 같은 회의의 사용량을 빼지 않는다.

회의 중 작성된 전사문과 번역문에는 별도의 보존 조건이 붙는다. 딥엘은 최신 회의 메시지를 통화가 끝날 때까지 메모리에 보관한 뒤 지운다고 안내한다. 참가자가 열어 본 전사나 번역은 기기에 남을 수 있다. 도움말에 따르면 그 기기 내 보관 기간은 관리자가 정하며 최대 30일이다.

대면 대화는 온라인 회의와 연결 방식이 다르다. 딥엘의 일대일 대화 도움말은 두 사람이 한 기기를 사이에 두고 각자의 언어로 말하는 방식을 설명한다. 번역문은 화면에 표시되고 음성으로도 나온다. iOS와 안드로이드 앱에는 서로 마주 앉은 두 사람이 자기 쪽에서 문장을 읽을 수 있게 화면을 나누는 표시 방식이 있다.

여러 사람이 대면으로 이야기할 때는 각자의 기기에서 번역을 받는 그룹 대화 기능을 쓴다. 라이선스가 있는 사람이 세션을 열고 QR 코드나 링크를 공유한다. 다른 참가자는 별도 보이스 요금제나 앱을 갖추지 않아도 링크로 참여할 수 있다. 딥엘은 참가자에게 헤드셋을 연결해 말하도록 안내한다.

딥엘 보이스 API는 실시간 음성 스트림의 전사와 번역을 서비스에 붙이는 데 쓴다. 개발자 문서에 따르면 한 세션에서 번역문은 최대 5개 언어로 받을 수 있다. 번역 음성도 쓰는 서비스는 세션을 요청할 때 음성을 받을 언어를 하나 지정한다. 요청에 이 설정을 넣지 않으면 API는 텍스트를 반환한다.

딥엘은 음성 출력을 요청한 기존 API 연동에서 지원 언어에 오러가 자동 적용된다고 설명했다. 개발자가 정하는 것은 출력 언어와 형식이다. 딥엘은 지원 언어를 늘릴 계획이며 추가 일정은 공개하지 않았다.