Voice AI Weekly #14 - 2026년 10월 4째 주

이번 주 해외 음성 AI 업계에서는 단일 파이프라인 기반 음성 모델의 출시와 온프레미스 배포 지원이 눈에 띄었습니다. 컨택센터 AI의 음성 데이터 처리를 둘러싼 법적 분쟁도 함께 다뤄졌는데요. 실제 도입 환경과 맞닿아 있는 다섯 가지 소식을 정리했습니다.

1. 미스트랄, Voxtral 3 공개, 자체 인프라 배포 지원

미스트랄이 10월 20일 음성인식, 음성합성 모델과 음성 에이전트 SDK를 묶은 Voxtral 3를 발표했습니다. 실시간 음성인식 지연 시간은 500밀리초 미만이며, 50개 이상 언어와 화자 분리, 프롬프트 기반 어휘 보정(Context Biasing)을 지원합니다. 글로벌 API 외에 프라이빗 클라우드나 사내 자체 인프라 배포를 지원해 음성 데이터를 외부로 내보내지 않고 운영할 수 있습니다.

출처 Mistral, Voxtral 3 발표 / TestingCatalog 보도

2. 일레븐랩스, 음성 대 음성 모델 Eleven Realtime 출시

일레븐랩스가 10월 20일 첫 음성 대 음성(Speech-to-Speech) 모델 Eleven Realtime을 공개했습니다. 경량 대화용 Mini와 툴 호출이 많은 업무용 Max 두 가지로 나뉘며, 첫 응답 생성 시간(TTFA)은 각각 평균 0.62초, 0.57초 수준입니다. STT, 턴 감지, LLM, TTS를 각각 거치던 구조를 단일 모델로 묶었고 OpenAI Realtime API와도 호환됩니다. 다만 감정이나 말투 같은 비언어적 음향 신호를 어떻게 다루는지는 구체적으로 밝히지 않았습니다. 처리 파이프라인이 하나로 합쳐질수록, 음성 신호에서 화자의 상태와 뉘앙스를 읽어내는 레이어가 핵심 차별점으로 작용할 것으로 보이네요.

출처 ElevenLabs, Eleven Realtime

3. 블록, 오디오 네이티브 전이중 모델 Dessa 프리뷰 공개

결제 기업 블록(Block)의 AI 연구팀이 10월 23일 전이중(Full-Duplex) 음성 모델 Dessa를 공개했습니다. 텍스트 변환이나 사전학습 모델 없이 사람의 실제 대화 음성만으로 처음부터 학습해, 상대방 말을 듣는 동시에 답변을 이어갈 수 있습니다. 블록은 맥북 프로 M4 Max 이상 환경에서 실시간 이상 속도로 로컬 구동된다고 밝혔습니다. 현재는 대기자 명단과 소수 연구자를 대상으로 한 프리뷰 단계로, 세부 벤치마크나 가중치는 아직 공개되지 않았습니다. 텍스트를 거치지 않고 음성 신호 자체를 처리하는 방식이 연구 현장에서도 점차 구체화되는 모양새입니다.

출처 Block, Dessa 발표 / PYMNTS 보도

4. IBM, 오픈소스 Granite Speech 5.0 공개

IBM이 10월 21일 20억 파라미터 규모의 음성인식, 번역 모델 Granite Speech 5.0을 Apache 2.0 라이선스로 공개했습니다. 오픈 ASR 리더보드의 영어 공개 데이터셋 9개 기준 평균 단어 오류율(WER) 5.06%를 기록하며 오픈 가중치 모델 중 2위에 올랐습니다. 4억 7천만 파라미터 경량 모델과 회의용 업데이트도 함께 배포됐습니다. 소음과 원거리 마이크 환경 성능이 개선됐다고 설명했으나 세부 검증 수치는 포함되지 않았습니다.

출처 Hugging Face, Granite Speech 5.0 / Voice AI Space 정리

5. 구글 컨택센터 AI 개인정보 소송, 홈디포 건 기각

미국 캘리포니아 북부 연방지방법원이 10월 22일 구글 컨택센터 AI(CCAI) 개인정보 소송에 대한 결정을 내렸습니다. 홈디포 고객 관련 청구는 소장 보완 기회를 부여하고 기각했으며, 버라이즌, 우버, 디스커버 고객 청구는 개별 중재 절차로 넘겼습니다. 원고 측은 AI 상담원에서 상담사로 전환된 뒤에도 구글이 통화를 모니터링하고 모델 학습에 활용했다고 주장하며, 구글은 이를 부인하고 있습니다. 홈디포 건의 보완 소장 제출 기한은 11월 12일입니다. 상담 음성이 외부 클라우드로 흘러가는 아키텍처 자체가 기업의 법적 쟁점이 될 수 있음을 보여주는 사례입니다.

출처 OpenClassActions, 구글 컨택센터 AI 소송 보도

음성 AI 도입에 대해 고민이 있으시다면 contact@holamago.com으로 문의해 주세요. 다음 주에는 11월 첫째 주 소식으로 찾아오겠습니다.