Liquid AI, 다국어 음성 작업 지원하는 LFM3-Audio-2B 공개
Liquid AI가 음성 인식·합성·번역과 녹음 이해, 도구 호출을 지원하는 20억 매개변수 모델 LFM3-Audio-2B를 공개했습니다. 한국어를 포함한 18개 언어의 음성 작업을 지원하지만, 음성 대화와 실시간 받아쓰기는 영어만 지원합니다. 회사가 제시한 지연 시간과 음성 변환 속도는 각각 특정 설명·장비 조건에 따른 수치입니다.
AI, 개발 도구, 오픈소스, 보안과 인프라의 변화와 이용 조건을 설명하는 최신 기사와 해설입니다.
Liquid AI가 음성 인식·합성·번역과 녹음 이해, 도구 호출을 지원하는 20억 매개변수 모델 LFM3-Audio-2B를 공개했습니다. 한국어를 포함한 18개 언어의 음성 작업을 지원하지만, 음성 대화와 실시간 받아쓰기는 영어만 지원합니다. 회사가 제시한 지연 시간과 음성 변환 속도는 각각 특정 설명·장비 조건에 따른 수치입니다.
ElevenLabs가 음성 인식, 발화 차례 처리, LLM, 음성을 함께 조정한 음성 에이전트 모델군 Eleven Realtime을 공개했습니다. v1 Mini는 첫 오디오까지 620ms, v1 Max는 570ms라고 밝혔으며 90개 이상 언어와 OpenAI 호환 Realtime API를 지원합니다.
llamadart와 Qwen 모델을 조합해 음성을 인식하고 대화 응답을 생성한 뒤 음성으로 합성하는 macOS 명령줄 예제를 만들었습니다. 3B 모델 조합과 더 작은 모델 조합을 비교한 결과, 작은 조합은 다운로드 용량과 메모리를 줄였지만 이 테스트에서는 전체 응답 시간이 더 길었습니다.
Fish Audio가 여러 화자의 대화와 긴 콘텐츠 생성을 겨냥한 350억 파라미터 텍스트 음성 변환 모델 Drama 3를 공개했습니다. H200 한 장에서 측정한 스트리밍 성능과 보코더를 별도 GPU에 배치했을 때의 처리량·첫 오디오 지연도 함께 제시했습니다.
Onepin은 ElevenLabs, OpenAI, Google 등 기존 TTS 음성을 유지하면서 대본의 이름·가격·날짜 발음을 점검하는 제작 도구입니다. 잘못 읽은 단어만 같은 목소리로 고쳐 전체 음성을 다시 생성하지 않도록 돕습니다.
EMA Lightning은 튀르키예어 텍스트를 음성으로 바꾸는 오픈소스 모델입니다. 제작자는 860만 파라미터로 Freya-TR-Eval에서 WER 0.92%를 기록했으며, RTX 4090에서 실시간보다 440배 빠르게 생성했다고 보고합니다. 스트리밍과 여러 요청의 GPU 동시 처리도 지원합니다.
VoiceStudio는 음성 복제와 디자인, 영상 더빙, 받아쓰기, 전사, 오디오북 제작을 지원하는 오픈소스 앱입니다. 기본 엔진은 k2-fsa/OmniVoice이며, 로컬 작업을 중심으로 API와 MCP 연동도 제공합니다.
Eclatira는 실시간 음성 대화와 카메라·화면 인식, API 실행을 하나의 엔진으로 묶은 개발자용 서비스입니다. 제작사는 MCP와 3,000개 이상의 앱 연동을 지원하며, 영상 스트림을 저장하지 않는다고 밝혔습니다.
NVIDIA가 최대 8명의 화자를 구분하는 오픈 웨이트 음성 분리 모델 Nemotron-3-Diarization을 공개했습니다. 스트리밍 지연 시간은 0.32초부터 설정할 수 있으며, 공개 평가에서 기존 Streaming Sortformer 모델보다 낮은 화자 분리 오류율(DER)을 기록했습니다.
Google이 자연어로 음성을 설계하고 대사별 연기 지시를 넣을 수 있는 Gemini 3.8 Flash TTS와 대량 처리에 맞춘 Flash-Lite TTS를 공개했습니다. 100개 이상 언어 지원, 30초 샘플 기반 음성 복제, SynthID 워터마크를 내세웠지만, 댓글에서는 실제 음성 품질과 안전장치, 가격 및 제품별 출시 시점에 대한 의견이 엇갈립니다.