Product Hunt

ElevenLabs Realtime — Realtime voice agent models with 570ms to first audio

ElevenLabs Realtime 공개…v1 Max 첫 오디오까지 570ms

ElevenLabs가 음성 인식, 발화 차례 처리, LLM, 음성을 함께 조정한 음성 에이전트 모델군 Eleven Realtime을 공개했습니다. v1 Mini는 첫 오디오까지 620ms, v1 Max는 570ms라고 밝혔으며 90개 이상 언어와 OpenAI 호환 Realtime API를 지원합니다.

에디터 노트

첫 오디오까지 570ms와 OpenAI API 호환성은 제품을 검토할 때 확인할 수 있는 구체적인 주장입니다. 다만 공개된 소개에는 지연 시간을 측정한 조건이나 비교 기준이 없습니다. 기존 이벤트 핸들러를 유지할 수 있다는 설명도 통합 비용을 줄일 가능성을 말할 뿐, 서비스별 구현 차이까지 해소한다고 확인해 주지는 않습니다. 댓글은 잠재 고객 선별 통화에서 실제 대화가 자연스러운지 궁금하다는 질문을 남깁니다. 결국 제시된 수치보다 발화 차례 처리와 대화 품질이 업무별로 어떻게 나타나는지가 도입 판단의 기준이 됩니다.

AI 요약

ElevenLabs가 음성 에이전트용 speech-to-speech 모델군 Eleven Realtime을 출시했습니다. 음성 인식, 발화 차례 처리, LLM, 음성을 전체 과정에서 함께 조정합니다.

모델과 지연 시간

v1 Mini는 자연스러운 대화에, v1 Max는 복잡한 작업에 맞췄습니다. 회사가 밝힌 첫 오디오 출력 시간은 Mini 620ms, Max 570ms입니다. 90개 이상 언어를 지원합니다.

제공 방식

ElevenAgents에서 사용하거나 OpenAI 호환 Realtime API로 연결할 수 있습니다. 기존 OpenAI Realtime API 앱은 엔드포인트와 모델 이름을 바꾸면 이벤트 핸들러를 유지할 수 있다고 소개합니다.

Product Hunt 반응

  • @rohanrecommends — Eleven Realtime은 자연스러운 대화를 구현하는 음성 에이전트용 speech-to-speech 모델군입니다. 음성 에이전트는 보통 음성 인식, 언어 모델, 발화 차례 처리 로직, 음성을 따로 연결합니다. 단계마다 전달 지연이 생기고 대화에 어색한 침묵이 끼거나 상대방 말을 덮어 말하게 됩니다. Eleven Realtime은 이 요소들을 전체 과정에서 함께 조정합니다. 자연스러운 대화용 v1 Mini와 정확하고 신중한 답변이 필요한 복잡한 작업용 v1 Max 두 모델을 제공합니다. ElevenAgents 또는 Realtime API로 사용할 수 있습니다. API는 OpenAI와 호환되므로 OpenAI Realtime API로 만든 음성 앱은 엔드포인트와 모델 이름을 바꾸면 기존 이벤트 핸들러가 계속 작동합니다. ElevenLabs에 따르면 90개 이상 언어에서 첫 오디오까지 걸리는 시간은 Mini 620ms, Max 570ms입니다. Mini는 비서, 튜터, 상호작용형 캐릭터에, Max는 잠재 고객 선별, 고객 지원, 일정 예약에 맞췄습니다. ElevenAgents에서는 드롭다운 하나로 모델을 선택하며 전사, 발화 차례 처리, 음성 설정이 미리 구성됩니다. 전화, 웹 위젯, WhatsApp, 컨택트 센터 플랫폼에 배포할 수 있습니다. 지식 베이스, 가드레일, 시나리오 테스트, 프로덕션 모니터링도 제공하며 대화 기록을 검색하고 감사할 수 있습니다. ElevenLabs는 SOC 2, HIPAA, GDPR 지원과 EU 데이터 레지던시, 데이터 보존 없음 모드를 내세웁니다. 음성 에이전트의 구성 요소를 직접 연결하지 않고 자연스러운 대화를 만들려는 지원, 영업, 일정 예약, 교육 분야 개발팀을 위한 제품입니다. Eleven Realtime, 문서, OpenAI 호환성 안내에서 사용해 볼 수 있습니다.
    • @aurelia_zambon — 잠재 고객 선별 통화에서 어떻게 들리는지 궁금합니다. 어색한 침묵이 가장 큰 문제인 분야니까요.
    • @shivam_kushwaha16 — 낮은 지연 시간과 OpenAI 호환성 덕분에 구성 요소를 일일이 연결하지 않고 음성 에이전트를 만드는 팀에 흥미로운 제품입니다.

원문: Product Hunt / 번역·요약: Trawling