기술

브라우저에서 말하고 보고 듣는 AI, LFM3-Omni-2B 체험

Liquid AI의 22억 파라미터 옴니 모델 LFM3-Omni-2B. 글·사진·영상·소리 입력과 음성 출력, WebGPU 체험 페이지, 한국어 지원, 직접 돌리는 코드, 라이선스 조건을 정리했습니다.

LiquidAI/LFM3-Omni-2B는 Liquid AI의 LFM3 계열 첫 옴니 모델입니다. 하나의 모델이 글, 사진, 영상, 소리를 알아듣고 글과 목소리로 답합니다. 2.2B 파라미터로 폰, 노트북 같은 기기에서 돌리도록 만들었습니다. 2026년 10월 21일 공개됐습니다.

할 수 있는 것

  • 사진에 대해 말로 묻기, 말을 받아 적거나 번역하기, 소리 내어 대화하기
  • 소리 있는 영상은 보면서 동시에 들어서, 화면과 소리를 둘 다 알아야 하는 질문에 답하기
  • 한국어는 글 언어와 음성 언어 목록에 모두 들어 있음
  • 생각(추론) 모드는 없는 모델이라 답이 빠름

브라우저 체험 페이지

LFM3-Omni-2B-WebGPU는 모델을 내려받아 내 컴퓨터의 그래픽 칩(WebGPU)으로 브라우저 안에서 돌립니다. 스페이스바를 누르고 말하거나, 구슬을 눌러 말하거나, 글로 입력합니다. 시간 확인, 위치, 타이머 같은 일을 말로 시킵니다. WebGPU가 되는 Chrome 같은 브라우저에서 여세요. 처음에는 모델을 받느라 시간이 걸립니다.

내 컴퓨터에서 코드로

pip install "transformers>=5.20.2" torch torchvision torchcodec accelerate pillow librosa soundfile
from transformers import AutoModelForMultimodalLM, AutoProcessor

model_id = "LiquidAI/LFM3-Omni-2B"
model = AutoModelForMultimodalLM.from_pretrained(model_id, trust_remote_code=True).eval()
processor = AutoProcessor.from_pretrained(model_id, trust_remote_code=True)

음성으로 답하게 하려면 generation_mode="audio"를 주고, 시스템 프롬프트에 음성 언어와 목소리(여성·남성)를 적습니다. GGUF 버전도 있어 llama.cpp 계열에서도 씁니다.

라이선스

LFM 1.0 라이선스입니다. 연 매출 1천만 달러 미만인 개인과 회사는 상업용으로도 쓸 수 있고, 그 이상인 회사의 상업용은 이 라이선스가 허락하지 않아 별도 계약이 필요합니다(5조).

오늘 할 일

Chrome에서 체험 페이지를 열고 마이크로 “지금 몇 시야?”라고 말 걸어 보세요. 답이 서버가 아닌 내 컴퓨터에서 만들어집니다.

쇼츠로 보기

이 글은 비치콤버스 쇼츠 No.59의 짝 글입니다. 짧은 주소 beachcombers.co.kr/s/59.

김현빈 Developer & Writer

기술, 포스팅 관련 질문, 프로젝트 협업 등 연락주시면 언제든지 회신 드립니다.

esc

↑↓ 고르기↵ 열기? 단축키

해변에서 주운 것

읽으러 가기 →
guest@beachcombers — zsh

단축키

⌘K 또는 /
글·작업·개발일지 찾기
R
해변 산책 — 아무 글 하나 줍기
`
터미널 열기
←→
쪽 넘기기 (휠·스와이프도 됩니다)
?
이 안내
esc
닫기