바이트댄스 시드림 5.5, 같은 이미지 100회 편집 시연

바이트댄스가 이미지 생성·편집 모델 시드림 5.5를 11월 9일 공개했다. 완성한 사진에서 가구나 소품처럼 요청한 부분을 여러 차례 고치면서 주변 구도를 유지하도록 설계했다. 배경이 투명하거나 반투명한 소재도 모델이 직접 만든다. 컴피는 10일 호환되는 컴피UI와 컴피 클라우드에서 새 모델을 쓸 수 있다고 안내했다.

제품 이미지 시안에서 조명이나 소품을 바꾸는 작업은 앞서 승인한 구도와 제품 외형을 유지해야 하는 경우가 있다. 시드림 5.5는 이미지를 통째로 새로 생성하는 기능과 함께, 기존 이미지에서 지정한 요소를 고치는 기능을 제공한다. 바이트댄스는 수정 대상 바깥의 픽셀을 보존하는 데 초점을 맞췄다. 같은 시안에서 소품을 하나씩 바꾸거나, 완성한 소재를 배경과 따로 만들어 다른 편집 작업에 가져가는 데 쓰이는 변화다.

직전 결과를 이어 쓴 100회 편집

바이트댄스 시연에서 연구진은 같은 인물 이미지를 100번 연달아 편집했다. 매번 나온 결과를 다음 요청의 입력으로 사용했다. 옷과 안경, 탁자 위 물건을 차례로 바꿨고 앞선 수정이 누적된 이미지에서 반지와 안경테도 손봤다. 100회는 회사가 공개한 시연의 길이다. 여러 이미지에서 100회씩 반복해 얻은 성공률이나 픽셀 차이의 수치는 발표 자료에 제시되지 않았다.

모델 소개 페이지에는 방 안의 가구와 조명을 순서대로 바꾸는 예도 있다. 가구를 더하는 요청은 그 물건의 형태뿐 아니라 방의 원근과 조명에 맞춰 배치하는 일까지 포함한다. 바이트댄스가 제시한 사례에서는 기존 배경의 배치를 유지하면서 추가한 물건의 크기와 위치를 맞췄다. 이처럼 기존 구도에서 물건을 하나씩 바꾸는 작업은 요청한 수정이 반영됐는지와 주변 세부가 유지됐는지를 함께 본다.

글자가 빽빽한 이미지도 바이트댄스가 손본 부분이다. 회사는 중국어와 영어를 포함한 자체 평가에서 글자가 심하게 깨진 비율이 0.4%, 경미한 오류는 1.7%였다고 밝혔다. 작은 글씨를 조밀하게 배치한 사례가 포함된 평가다. 두 비율은 바이트댄스가 고른 평가 과제와 언어를 기준으로 집계했다.

투명한 소재를 다른 디자인에 합성

시드림 5.5는 색상과 함께 각 픽셀의 투명도를 저장하는 알파 채널을 출력할 수 있다. 투명한 부분에는 합성할 때 아래쪽 이미지가 그대로 보이고, 반투명한 부분에서는 아래쪽 색이 일부 비친다. 유리 소품처럼 윤곽 안에도 투명한 부분이 있는 소재를 따로 만들면 나중에 다른 배경 위에 올릴 수 있다. 스티커의 바깥처럼 완전히 비워 둘 영역도 같은 방식으로 표현한다.

투명 소재 한 장을 생성하는 것과 완성된 그림을 여러 요소로 나누는 것은 서로 다른 작업이다. 컴피는 시드림 5.5 작업에서 투명 출력과 함께 이미지의 요소를 별도 레이어로 나누는 흐름도 소개했다. 첫 번째는 처음부터 별도로 배치할 소재를 얻는 경우에 해당한다. 두 번째는 이미 만들어진 그림에서 배경이나 요소를 분리해 각각 수정할 수 있도록 준비하는 작업이다. 피카는 예를 들어 기존 이미지의 배경, 물체, 글자를 각각 분리할 수 있다고 안내한다.

컴피와 피카에서 확인된 제공 범위

컴피는 클라우드에서 이미지 편집 템플릿을 제공한다. 데스크톱에서도 호환되는 컴피UI 버전으로 모델을 작업 흐름에 넣을 수 있다. 해당 모델을 연결하는 파트너 노드는 컴피 계정 로그인과 크레딧이 필요하다. 컴피UI를 자기 컴퓨터에서 실행하는 경우에도 이 노드의 이용 조건이 적용된다. 구독 요금과 별도로 모델을 실행할 때 크레딧이 차감된다고 컴피는 설명했다.

피카도 10일 공식 영상에서 이미지 스튜디오에 시드림 5.5를 추가했다고 밝혔다. 피카의 모델 페이지는 입력으로 설명이나 기존 사진을 받을 수 있고 투명 배경을 선택할 수 있다고 안내한다. 차감될 크레딧은 생성 전에 선택한 조건에 맞춰 화면에 표시된다. 같은 모델이라도 컴피에서는 이미지 편집 작업 흐름 안에 연결하고, 피카에서는 이미지 스튜디오의 설정으로 이용하는 차이가 있다.

바이트댄스는 중국에서 지멍, 더우바오, 더우바오 워크, 훠산팡저우 체험 센터에 순차 제공한다고 밝혔다. 드리미나 공식 페이지는 계정에서 모델이 표시될 때 선택할 수 있다고 안내한다. 바이트댄스는 5.5 제품군의 프로 버전도 예고했으며, 발표문에서 그 버전의 제공 날짜는 밝히지 않았다.