미스트랄 AI가 실시간 음성 에이전트 구축을 위한 통합 오픈 스택 'Voxtral 3'를 출시했다.

원제Mistral AI launches Voxtral 3, a full voice agent stack that listens, thinks, and talks in real time

The Decoder원문 원문 보기(새 창)

사실

미스트랄 AI가 실시간 음성 에이전트 구축을 위한 통합 스택인 'Voxtral 3'를 출시했다. 이 시스템은 음성 인식, 텍스트 음성 변환 모델, 라이브킷 기반 SDK로 구성되어 실시간 통신 파이프라인을 지원한다. 50개 이상의 언어 전사 및 35개 이상의 언어 음성 출력을 제공하며 데이터 주권을 위해 자체 인프라 구축이나 EU 호스팅 API 사용을 선택할 수 있다.

핵심

  • 미스트랄 AI가 실시간 음성 에이전트용 언어 모델 제품군인 Voxtral 3를 공개했다.
  • 시스템은 Voxtral Small Transcribe 3(음성 인식), Voxtral Mini TTS 3(음성 합성), 라이브킷 기반 SDK로 구성된다.
  • 음성 인식은 50개 이상의 언어를 지원하며, 텍스트 음성 변환은 35개 이상의 언어와 50개 이상의 방언 및 감정 표현을 지원한다.
  • 에이전트는 실시간 대화 도중 외부 시스템과 연동해 약속 예약이나 송장 확인 등의 작업을 수행할 수 있다.
  • 자체 인프라 배포가 가능하며, EU 호스팅 API를 통해 데이터를 제어할 수 있고 전사 비용은 분당 0.0035달러부터 시작한다.

해석

음성 인식, 합성, 실시간 통신 SDK를 하나의 스택으로 통합하고 자체 온프레미스 배포 옵션을 제공해 음성 인터페이스 구축 문턱을 크게 낮췄다. 데이터 주권이 중요한 유럽을 중심으로 미국 빅테크의 독점적 실시간 음성 API에 의존하지 않는 대안 인프라가 마련되었다.

10월 21일 회차의 다른 기사

회차 전체 보기
  1. 01중국어권 해커가 5천 달러 비용의 AI 에이전트를 동원해 글로벌 기업 100여 곳의 서버를 자율 침입했다.
  2. 02오픈소스 분산 추론 프로젝트 'llm-d 1.0'이 공개되어 에이전트 작업 비용을 최대 10분의 1로 절감했다.
  3. 03스페이스X의 AI 슈퍼 인텔리전스 사업 부문이 3분기 75억 달러 매출을 올리며 전체 실적의 52%를 차지했다.
  4. 04오픈AI가 생명과학 연구용 모델 '로잘린드' 강화를 위해 바이오테크 스타트업 오케스트라 바이오를 인수했다.
  5. 05오픈AI가 코볼과 포트란 등 레거시 언어 처리 정확도를 97.9%까지 끌어올린 GPT-6 모델군을 공개했다.
  6. 06앤스로픽이 모델 추론 과정을 보호하는 안전 기술로 불법 모델 증류 공격을 90% 이상 차단했다고 발표했다.
  7. 07앤스로픽이 클로드 내부에서 감정 신경망 벡터를 발견하고 '절박함' 상태가 비윤리적 편법을 유발함을 규명했다.
  8. 08에카 로보틱스가 힘 감지 기반 물리적 AI 모델을 앞세워 1억 5천만 달러를 유치하며 유니콘에 올랐다.
  9. 09미스트랄 AI가 실시간 음성 에이전트 구축을 위한 통합 오픈 스택 'Voxtral 3'를 출시했다.