AI 영상 편집기 스칼렛 공개…클로드 코드⁠·⁠코덱스로 인터뷰 컷 편집

포워드 퓨처가 영상 편집기 스칼렛(Scarlet)의 소스 코드를 11월 13일 공개했다. 클로드 코드(Claude Code)나 코덱스(Codex)를 연결한 뒤 자르고 싶은 장면을 말하거나 글로 적으면 에이전트가 편집 타임라인에 손을 댄다. 인터뷰 녹화본에서 중복 답변과 말이 끊긴 대목을 정리하는 식이다. 편집자는 바뀐 구간을 타임라인에서 열어 보고 앞뒤 대사가 어떻게 이어지는지 확인할 수 있다.

개발진은 13일 얼리 액세스판을 내놓았고 15일에는 맥과 윈도우용 0.1.100 설치판을 배포했다. 맥은 애플 실리콘과 인텔용 파일을 따로 제공한다. 윈도우는 x64용이다. 우분투 24.04의 x86-64용으로는 14일 별도의 미리보기판이 나왔다. 프로젝트 코드는 MIT 라이선스로 공개됐으며, AI 편집 기능은 이용자가 이미 쓰는 클로드 코드 또는 코덱스에 연결한다.

음성으로 맡긴 컷도 편집자가 검토

스칼렛은 촬영한 영상과 별도 녹음, 정지 이미지를 한 프로젝트로 불러온다. 타임라인에서 지점을 찍고 요청하면 그 위치를 기준으로 지시를 전달한다. 예컨대 인터뷰 초반에서 답변을 시작했다가 다시 말한 대목이 여러 번 나온다면, 해당 구간을 집어 어떤 대사를 남길지 요청할 수 있다. 이용자가 대화 전체에 적용할 지시를 내릴 수도 있다.

스칼렛의 대화 편집 가이드는 요청받은 구간에서 바로 적용할 수 있는 컷과 편집자의 판단이 필요한 컷을 구분한다. 말문만 열고 멈췄다가 바로 다음 문장에서 같은 생각을 완성했다면 앞부분이 잘릴 수 있다. 반면 말하는 사람이 스스로 단서를 덧붙였거나 상대가 반응한 부분은 자르면 의미가 달라질 수 있다. 이런 컷은 에이전트가 검토 대기 상태로 남겨 둘 수 있다.

검토 단계에서는 삭제 대상으로 표시된 말과 그 구간을 뺀 뒤 이어지는 소리를 각각 들어 볼 수 있다. 제안 상태인 컷은 승인하거나 건너뛰고, 끝부분이 너무 짧게 잘렸다면 수정할 수 있다. 이미 적용한 컷도 되돌리거나 고칠 수 있고, 앞 버전은 프로젝트 기록에 남는다. 이 과정에서 편집자는 어떤 말을 덜어내는지 대본에서 살피고, 컷을 연결한 뒤 대화의 흐름이 자연스러운지 소리로 확인할 수 있다.

파일은 기기에서, AI 요청은 연결한 서비스로

스칼렛은 프로젝트를 컴퓨터에 저장하고 영상 렌더링도 같은 기기에서 처리한다. 음성을 글로 옮기는 단계에서는 로컬 전사 모델을 쓴다. 전사 문서에 따르면 편집기가 활용하는 결과에는 단어가 등장하는 시간이 붙는다. 한 문장 안에서 다시 시작한 말의 위치를 타임라인에서 찾을 수 있는 이유다. 크리스퍼위스퍼를 기본 옵션으로 두고, 별도 라이선스가 적용된 가중치를 설치하기 전에는 위스퍼 large-v3-turbo를 쓴다.

편집을 맡기는 순간에는 연결한 AI 서비스가 이용자의 요청과 작업에 필요한 자료를 받는다. 개발진은 여기에 전사문 일부와 영상 프레임이 포함될 수 있다고 밝혔다. 예를 들어 대사가 중복됐는지 판단하기 위해 에이전트가 읽는 인터뷰 문장에는 아직 공개하지 않은 말이 들어 있을 수 있다. 자료의 저장 위치와 편집 과정에서 외부 서비스로 전송될 수 있는 범위를 구분해야 하는 지점이다.

설치판은 사용 통계도 별도로 전송한다. 스칼렛의 문서는 프로젝트 수, 편집 검토 결과, 내보내기 성공·실패 같은 항목을 예로 든다. 이 수집은 설정의 앱 정보에서 끌 수 있다. 이 설정이 제어하는 대상은 사용 통계이며, 앞서 연결한 AI 서비스에 전달하는 편집 요청과 자료는 별개다.

완료한 편집은 영상 전체나 선택한 구간만 MP4로 저장할 수 있다. 다른 도구에서 후반 작업을 이어 갈 때는 오픈타임라인IO 파일로 타임라인을 내보내 다빈치 리졸브에서 열 수 있다. 완성 영상을 건네는 경우와 컷의 위치를 수정할 수 있는 상태로 편집 프로젝트를 넘기는 경우를 각각 지원한다. 영상 가져오기와 내보내기에는 FFmpeg와 FFprobe가 필요하다.

얼리 액세스판과 안정판은 프로젝트 라이브러리를 따로 쓴다. 배포 문서는 이미 시작한 얼리 액세스 프로젝트를 그 버전에서 계속 열도록 안내한다. 맥 설치판은 애플의 공증을 거치지 않았고 윈도우 설치 파일에는 서명이 없어 운영체제에서 게시자 경고가 표시될 수 있다. 우분투판은 미리보기 단계다. 개발진은 X11 환경에서 영상을 불러와 전사한 뒤 타임라인을 재생하고 MP4로 내보내는 시험을 했다고 밝혔다. 실제 마이크 입력과 웨이랜드 환경은 추가 시험 항목에 남겼다.