휴대폰에서 보고 듣는 AI…리퀴드 LFM3 가중치 공개

리퀴드 AI가 27일 휴대폰·노트북에서 실행하는 소형 AI 모델군 ‘LFM3’의 가중치를 공개했다. 텍스트·시각·음성과 분류·정보 추출용 모델까지 6종으로, 개발자가 내려받아 GPU에서 추가 학습하고 자체 앱에서 실행할 수 있다.

텍스트 모델 LFM3-1.7B는 약 17억 3천만 개의 파라미터를 갖췄으며, 한국어를 포함한 16개 언어를 지원한다. 회사가 안내한 4비트 모델의 메모리 규모는 약 1GB다. 입력과 출력을 합친 문맥 한도는 25만 6천 토큰으로, 문서를 읽어 정해진 형식으로 답하거나 외부 도구를 호출하는 로컬 에이전트용으로 학습했다.

이미지·영상용 LFM3-VL-2B에는 기존 시각 모델에 없던 영상 입력이 추가됐다. 녹화 강의나 휴대폰 영상의 내용을 묻고, 문서·차트·화면에서 정보를 읽거나 사물의 위치를 찾는 작업을 겨냥한다. 영상은 초당 두 프레임을 뽑아 처리하며, 약 19억 2천만 파라미터와 12만 8천 토큰의 문맥 한도를 갖춘다.

음성 모델은 말이나 글을 받아 텍스트·음성으로 답하고, 녹음 속 발언과 소리에 대한 질문도 처리한다. 한국어를 포함한 18개 언어의 음성 전사·합성·번역을 지원하며 문맥 한도는 3만 2천 토큰이다. 마이크 입력을 순차적으로 처리하고 음성 답변도 스트리밍으로 내보낸다. 음성 요청을 앱·기기의 도구 호출로 변환하는 기능도 포함했다. 오디오 입력은 16kHz, 음성 출력은 24kHz 규격을 쓴다.

여러 입력을 함께 다루는 Omni 모델은 사진을 보여 주면서 말로 묻거나, 영상의 화면과 대화를 함께 참고해야 하는 질문을 처리한다. 파라미터는 약 21억 7천만 개다. 회사는 음성 인식·시각 언어·텍스트 생성·음성 합성을 각각 맡던 모델을 하나로 묶었다고 설명했다. 글·사진·영상·음성을 받아 결과는 글과 말로 내보낸다. 이 모델의 문맥 한도는 3만 2천 토큰이며, 텍스트 전용 모델의 최대 길이보다 짧다.

두 결정 모델은 긴 답변을 차례로 생성하는 대신 한 번의 계산으로 여러 질문에 정형화된 결과와 확률을 돌려준다. 문서에서 숫자·날짜와 원문 위치를 뽑거나, 사진 속 사물의 위치와 수량을 판단하는 식이다. 음성을 받는 d1-Omni-2B는 통화·음성 메모 분류도 겨냥한다. 모델 카드에는 긴 발화에서 정확도가 낮아지며 특히 비라틴 문자 언어에서 저하가 크다는 한계를 적었다. 음성이 없는 입력에는 텍스트·사진 처리에 더 강한 d1-2B를 대안으로 제시했다.

작은 모델의 처리 범위와 메모리 조건

리퀴드는 작은 텍스트 모델의 권장 범위를 도구 호출·정형 출력·분야별 맞춤 학습으로 정했다. 모델 카드에는 복잡한 여러 단계 추론과 에이전트 코딩 작업은 권장하지 않는다고 명시했다. 지식이 많이 필요한 질문에는 외부 자료 검색을 결합하도록 안내했다.

발표문은 12만 8천 토큰 문맥에 중간 계산을 저장하는 KV 캐시 1.6GB가 필요하다고 밝혔다. 약 1GB 모델 메모리 외에 문서 길이에 따른 부담이 더해진다. 기기 속도 비교는 4비트 양자화와 3만 2천 토큰 문맥 조건으로 측정했다.

공개 자료에는 기본 모델을 특정 업무에 맞게 바꾸는 학습 예시도 실렸다. 시각 모델의 경우 영수증 사진에서 구조화된 정보를 추출하거나 수식 이미지를 LaTeX 문서 형식으로 옮기는 예시를 제공한다. 개발자가 가진 자료와 원하는 출력 형식으로 모델을 조정하는 용도다. 시각 모델 문서 역시 코딩·긴 대화·복잡한 추론에는 한계가 있다고 밝혔다.

이용 조건은 LFM Open License v1.0을 따른다. 리퀴드는 연매출 1천만 달러를 초과하는 기업의 상업적 이용에는 별도 유료 라이선스가 필요하다고 안내한다. 자격을 갖춘 비영리 조직의 비상업·연구 목적 이용에는 이 매출 기준을 적용하지 않는다. 가중치를 내려받아 직접 운영하는 조건과 회사 API를 호출하는 요금은 별도로 안내하고 있다.

사용자가 추가 학습한 모델과 수정분을 반드시 공개해야 하는 의무는 없다. 회사는 원본 모델의 소유권을 유지하고, 이용자가 만든 수정분은 이용자에게 귀속된다고 설명했다. 다만 수정 모델에도 원래 라이선스의 이용 조건이 이어진다. 모델이나 파생물을 재배포할 때는 라이선스 사본과 저작권·관련 고지를 함께 유지해야 한다.