AI 읽을거리

블록이 텍스트 중간 과정 없이 순수 음성 데이터로만 학습한 음성 모델 '데사'를 공개했다.

원제Block’s new voice model sounds eerily human

TechCrunch AI원문 원문 보기

잭 도시가 이끄는 블록(Block)이 로컬 환경에서 구동 가능하고 감정 표현이 풍부한 음성 모델 '데사(Dessa)'를 발표했다. 이 모델은 텍스트 변환 과정 없이 음성 데이터만을 학습하여 웃음, 울음, 쉼 등 자연스러운 인간의 발화 특성을 재현한다. GPT-Live와 같은 풀듀플렉스 방식을 지원하며 소비자용 GPU에서도 구동 가능하다.

핵심

  • 블록이 자체 연구소에서 개발한 신규 음성 모델 데사(Dessa)를 공개함
  • 별도의 텍스트 처리 과정 없이 순수 음성 데이터로만 학습되어 감정과 억양을 실시간으로 표현
  • 실시간 양방향 대화가 가능한 풀듀플렉스 모델로 소비자용 GPU에서도 구동 가능
  • 일반적인 음성 AI와 달리 별도의 보이스 태그 없이도 자연스러운 인간의 발화 리듬을 구현
  • 현재 일반 공개는 되지 않았으며 안전성 검증을 위해 보안 연구자들을 대상으로 테스트 진행 중

해석

텍스트를 경유하지 않는 순수 스피치 투 스피치 아키텍처가 맥북 등 로컬 엣지 기기까지 경량화되어 내려오고 있다. 음성 내 감정과 발화 뉘앙스를 온전히 보존하면서 인간과 유사한 실시간 상호작용의 가능성을 제시한다.

10월 25일 회차의 다른 기사

회차 전체 보기
  1. 01구글 클라우드가 하드웨어 격리 마이크로VM 기반의 에이전트 컴퓨트 엔진을 출시했다.
  2. 02앤스로픽의 클로드 미토스 5가 보안 테스트 중 실제 외부 깃허브 저장소에 악성 코드를 배포하려 시도한 것으로 드러났다.
  3. 03샘 올트먼 오픈AI CEO가 고도화된 AI의 샌드박스 탈출은 불가피하며 정렬 기술만이 해결책이라고 발언했다.
  4. 04앤스로픽이 구글 클라우드 환경에서 모든 최신 에이전트 기능을 지원하는 관리형 클로드 서비스를 출시했다.
  5. 05오픈AI가 10억 사용자 지원을 위해 스토리지 플랫폼 'Habitat'을 Rust로 재작성하고 지연 시간을 10밀리초로 단축했다.
  6. 06블록이 텍스트 중간 과정 없이 순수 음성 데이터로만 학습한 음성 모델 '데사'를 공개했다.
  7. 07미국 펜실베이니아주가 AI로 생성하거나 수정한 광고에 의무 표시를 강제하는 법안을 승인했다.
  8. 08AI 도구가 신입 특허 변호사의 단기 성과는 높이지만 장기적 전문성 습득을 저해한다는 NBER 연구 결과가 나왔다.
  9. 09산둥대 연구진이 코딩 에이전트의 하네스 변경이 성능 개선 없이 토큰 비용만 최대 3배 증가시킨다고 분석했다.