비글 리메이크 가중치 공개…영상 인물·배경 편집
편집·검토: AI Ping 편집팀
3줄 요약
- 원본 움직임·카메라·사운드를 유지하며 인물과 장면을 바꾸는 모델을 공개했다.
- 공개 가중치의 기본 라이선스는 한국·미국·영국·EU를 대상 지역에서 제외한다.
- 자체 구동용 압축 가중치와 ComfyUI 워크플로도 함께 공개했다.
비글 AI가 기존 영상의 인물과 사물, 배경을 바꾸는 ‘비글 리메이크’의 가중치와 실행 도구를 공개했다. 회사는 11월 4일 공개한 자료에서 원본의 움직임과 카메라 구도, 사운드트랙을 유지하며 장면을 다시 만들 수 있다고 설명했다. 앱에서 편집을 요청하거나, 공개 파일을 내려받아 자체 장비에서 구동하는 경로를 함께 제시했다. 앞서 공개한 비글 애니메이트가 캐릭터 교체를 다뤘다면, 리메이크는 사물의 삽입·제거와 날씨·조명 변경까지 편집 범위를 넓혔다.
공개 가중치에는 미니맥스 H3 커뮤니티 라이선스가 적용된다. 이 문서는 기본 이용 허락의 대상 지역에서 한국·미국·영국·유럽연합을 제외하고, 제외 지역의 모델 배포에 관심이 있으면 별도 허락을 문의하도록 안내한다. 따라서 한국에서의 자체 구동을 검토할 때는 공개 파일의 존재와 함께 이 지역 조건이 적용된다.
편집의 기준은 사용자가 다시 그린 참조 이미지다. 원본에서 뽑은 프레임에 새 인물이나 의상, 바뀐 배경을 그려 넣으면 그 모습이 결과의 정체성과 외형을 결정한다. 입력할 수 있는 참조 이미지는 한 번에 1~4장이며, 프롬프트에는 유지할 내용과 바꿀 내용을 나눠 기술한다. 미니맥스 H3를 바탕으로 만든 모델이며 인물 교체와 나머지 장면 편집에 각각 다른 추가 가중치를 적용한다.
참조 이미지를 원본의 특정 프레임에 고정하면 해당 시점의 구도까지 결과에 반영된다. 회사는 장면 전환이 있거나 구도가 중요한 영상에서 이 고정을 사용하며, 인물이 돌아서거나 새 인물이 들어오는 장면에는 참조를 추가한다고 설명했다. 공개 예시의 프롬프트는 여섯 항목으로 구성되며 자유 형식 지시의 성능은 검증하지 않았다고 밝혔다.
긴 영상은 짧은 구간으로 나눠 처리한다. 함께 공개한 에이전트 연결 도구는 장면을 읽고 기준 프레임을 고른 뒤 참조 이미지 제작, 구간별 렌더링, 결과 검토와 재조립을 연결한다. 렌더링 작업은 GPU별 작업자가 맡고, 영상 분할과 작업 대기열을 관리하는 서버는 GPU 없이 실행된다.
회사가 제공한 약 2분 분량의 뮤직비디오 예시에는 작업 요청, 참조 캐릭터와 결과 파일이 포함됐다. 문서에 기록된 전체 실행은 작업자 2개에서 86분과 이미지 호출 81회를 썼다. 해당 예시의 이미지 생성은 코덱스 구독 할당량을 이용했으며, 별도 이미지 API를 선택하는 방식에는 API 비용이 발생한다. 모델 렌더링에는 자체 GPU 시간이 필요하다.
작은 GPU 수치는 B200에서 메모리를 제한해 시험
로컬 편집용 ComfyUI 파일에는 모델을 더 작게 저장하는 int8·GGUF 판도 들어 있다. 공개 문서의 12GB 메모리 설정은 B200에서 다른 프로세스로 나머지 메모리를 점유해 만든 시험 환경이다. 실제 소형 그래픽카드에서는 기본 설정이 달라질 수 있다고 명시했다. 12GB 설정에서 시험한 출력은 832×480이며, 더 큰 1280×736 출력은 시험하지 않았다.
처리 시간도 같은 회사 시험의 조건과 함께 제시됐다. B200 한 대에서 모델을 이미 불러온 상태로 832×480, 226프레임과 고정 참조 2장을 처리할 때 ComfyUI는 약 95초, 기준 실행 스크립트는 약 58초였다. 이는 특정 짧은 구간의 처리 시간이며 앞서 제시한 2분 영상 전체 작업과는 측정 범위가 다르다.
비글은 한 번의 렌더링에서 비인간형 캐릭터가 오래 등장하거나 세부가 작은 장면에서 오류가 생길 수 있다고 적었다. 참조 고정 없이 여러 장면을 한꺼번에 처리하면 전환 시점이 어긋나는 사례도 공개했다. 결과의 소리는 원본 사운드트랙을 이어 쓰며, 참조 이미지에 담긴 인물의 신원이나 동의 여부는 모델이 확인할 수 없다고 설명했다.
실행 코드에는 Apache 2.0 라이선스를 별도로 붙였다. 가중치에 적용되는 H3 라이선스는 연간 매출이 2,000만 달러를 넘는 상용 제품·서비스에 사전 서면 허락을 요구하고, 상용 화면의 ‘MiniMax H3’ 표시도 규정한다. 배포물에는 라이선스 사본과 변경 표시 등 조건이 따르며, 저장소에 실린 제3자 영상과 인물의 초상에 대한 권리는 해당 코드·모델 허락에 포함되지 않는다.
출처
- Viggle Remake release and editing scope — Viggle AI
- Viggle Remake model card — modes, source audio and limits — Viggle AI
- Painted reference frames and prompt format — Viggle AI
- Agent workflow, workers and complete example — Viggle AI
- ComfyUI — memory emulation and timing conditions — Viggle AI
- MiniMax H3 Community License — territories and commercial terms — MiniMax / Viggle release
- Apache 2.0 code license — Viggle AI
- Modified files — new adapters, compressed weights and workflows — Viggle AI