미스트랄 AI가 1조 파라미터 규모의 차세대 모델 '미스트랄 라지 4'를 공개했다.

원제Introducing Mistral Large 4: Le chonk

Simon Willison원문 원문 보기(새 창)

사실

미스트랄 AI가 1조 파라미터 규모의 차세대 언어 모델인 미스트랄 라지 4를 발표했다. 해당 모델은 3,800개의 엔비디아 그레이스 블랙웰 GPU 클러스터에서 학습되었으며, 현재 API를 통해 미리보기 버전을 제공하고 있다. 오픈 웨이트 모델은 이달 말 공개될 예정이며, 아티피셜 애널리시스 벤치마크 점수 38점을 기록하여 이전 세대 대비 성능이 크게 개선되었다.

핵심

  • 미스트랄 라지 4는 1조 파라미터 규모로, 490억 개의 활성 파라미터를 사용하는 모델임
  • 학습을 위해 3,800개의 엔비디아 그레이스 블랙웰 GPU가 사용됨
  • 현재 API를 통해 미리보기 제공 중이며, 오픈 웨이트 모델은 2026년 10월 말 배포 예정
  • API 호출 시 'none'과 'high' 두 가지 추론 수준을 지원함
  • 아티피셜 애널리시스 기준 38점을 획득하여 이전 모델인 미스트랄 라지 3 대비 성능이 대폭 향상됨

해석

유럽을 중심으로 한 개방형 가중치 진영이 초거대 파라미터 영역에서도 글로벌 독점 모델과의 성능 격차를 좁혀가고 있음을 나타낸다. 기업들이 특정 폐쇄형 생태계에 종속되지 않고 데이터 주권을 지키며 고성능 인프라를 활용할 수 있는 선택지가 유지되고 있다.

10월 8일 회차의 다른 기사

회차 전체 보기
  1. 01오픈AI가 GPT-6 모델과 동적 시각 요소를 생성하는 '인텔리전트 UI'를 공식 발표했다.
  2. 02앤트로픽이 API 비용을 최대 90% 낮추고 컨텍스트 창을 확대한 '클로드 하이쿠 5.5'를 출시했다.
  3. 03마이크로소프트가 엔비디아 RTX Spark 기반 하드웨어와 윈도우용 '하이브리드 인텔리전스'를 공개했다.
  4. 04오픈AI가 미공개 AI 모델을 활용해 722편의 수학 연구 논문과 형식 검증 코드를 공개했다.
  5. 05누스 리서치가 15억 달러 기업 가치로 투자를 유치하고 기업용 에이전트 솔루션을 출시했다.
  6. 06미스트랄 AI가 1조 파라미터 규모의 차세대 모델 '미스트랄 라지 4'를 공개했다.
  7. 07구글이 AI 생성물 식별 도구 'SynthID Detector'를 일반에 공개했다.
  8. 08구글이 텍스트와 영상 등을 단일 공간에서 다루는 소형 멀티모달 모델 'EmbeddingGemma 2'를 발표했다.
  9. 09위키미디어 재단이 플랫폼 내에서 오픈AI 에이전트의 비인가 무단 활동을 적발해 발표했다.
  10. 10앤스로픽이 보안 전문가를 위한 '사이버 검증 프로그램'을 개편하고 모델 접근 등급을 세분화했다.