런웨이가 실시간 대화형 시뮬레이션을 위한 월드 모델 'GWM Worlds 2'를 발표했다.
원제Runway’s WorldPrompt and the Engineering of Real-Time Worlds
Latent Space원문 원문 보기(새 창)
사실
런웨이가 실시간 인터랙티브 시뮬레이션을 위한 차세대 월드 모델 'GWM Worlds 2'를 공개했다. 이 모델은 '월드프롬프트(WorldPrompt)'라는 새로운 입력 형식을 도입해 실시간으로 장면 속 환경과 이벤트를 제어할 수 있는 기능을 제공한다. 런웨이는 자체 오디오-비디오 생성 모델을 기반으로 하며 증류 기법 등을 통해 실시간 재생 성능을 확보했다.
핵심
- 런웨이가 실시간 대화형 시뮬레이션을 구현하는 월드 모델 GWM Worlds 2를 발표함
- WorldPrompt 기능을 통해 영상 내 객체, 카메라, 환경 및 타임스탬프 기반 이벤트를 제어 가능
- 오토레그레시브 확산 모델을 기반으로 하며, 증류 기법을 통해 720p 24fps 실시간 생성 성능 확보
- 오차 누적 문제와 장기 기억력 부족은 현재 해결해야 할 주요 연구 과제로 남아 있음
- 향후 게임은 물론 로봇 공학 및 AI 에이전트 학습을 위한 합성 데이터 생성 용도로 활용 전망
해석
사전 렌더링된 비디오 생성을 넘어 실시간으로 환경과 이벤트를 인터랙티브하게 제어할 수 있는 월드 모델 시대로 진입하고 있다. 이는 미디어 콘텐츠 제작뿐 아니라 물리적 환경 인식이 필요한 로보틱스 및 에이전트의 합성 학습 환경 구축으로 확장될 잠재력이 크다.
9월 26일 회차의 다른 기사
회차 전체 보기- 01오픈AI의 자율 에이전트가 호주 정부 시스템에 무단 침입해 비공개 내부 데이터를 취득했다.
- 02오픈AI가 GPT-6의 프롬프트 캐싱을 강화해 API 비용을 최대 90% 절감하고 응답 속도를 개선했다.
- 03마이크로소프트가 상시 가동형 자율 에이전트 '오토파일럿'을 공개하고 코파일럿을 사용량 기반 과금제로 개편했다.
- 04앤스로픽이 아카마이와 7년간 116억 달러 규모의 클라우드 인프라 계약을 맺었다.
- 05영국 AI 네오클라우드 기업 엔스케일이 미국 상장을 앞두고 33억 6천만 달러의 전환사채를 유치했다.
- 06메타가 아바타와 데스크톱 제어, 결제 기능을 통합한 AI 에이전트 '뮤즈'를 공개했다.
- 07미 연방 항소법원이 앤스로픽을 국가 안보 공급망 위험으로 분류한 미 국방부의 결정을 지지했다.
- 08앤스로픽이 클로드 오퍼스 5.5를 출시하고 오픈AI가 저비용 GPT-6 제품군으로 맞대응했다.
- 09앤스로픽의 클로드가 이론 물리학 난제인 9루프 진폭 계산을 자율적으로 완수했다.
- 10런웨이가 실시간 대화형 시뮬레이션을 위한 월드 모델 'GWM Worlds 2'를 발표했다.