다이나 로보틱스가 100만 시간 비디오를 학습한 월드 액션 모델 'Dyna-2'와 물리적 에이전트를 공개했다.
원제Dyna-2: General Purpose Physical Agents with Hour-Long Autonomy — Jason Ma, Dyna Robotics
Latent Space원문 원문 보기(새 창)
사실
다이나 로보틱스(Dyna Robotics)는 100만 시간 이상의 인간 비디오 데이터를 학습한 '월드 액션 모델'인 Dyna-2를 공개하고 이를 탑재한 로봇 에이전트 Dyna-2.1을 선보였다. 이 모델은 로봇의 행동을 제어함과 동시에 미래 비디오를 예측하여 물리적 환경에서의 범용 자율성을 강화한다. 제이슨 마(Jason Ma) 최고과학책임자는 로봇 학습의 핵심 병목인 데이터 문제를 해결하기 위해 방대한 비디오 학습과 소량의 데모 데이터를 결합하는 방식을 채택했다고 밝혔다.
핵심
- Dyna-2는 미래 비디오 예측과 로봇 액션을 결합한 월드 액션 모델로, 100만 시간 이상의 비디오로 사전 학습됨.
- Dyna-2.1은 Dyna-2 모델을 기반으로 한 물리적 로봇 에이전트로, 장시간 자율 업무 수행이 가능함.
- 확산 트랜스포머(Diffusion Transformer)와 플로우 매칭(Flow Matching) 아키텍처를 사용하여 정밀하고 부드러운 로봇 제어를 구현함.
- 범용 모델을 학습시킨 뒤 약 45분의 데모 데이터로 특정 작업에 적응하는 방식으로 효율적인 태스크 수행을 지원함.
- 식당(딘타이펑 등) 및 호텔 등 실제 현장에서 로봇을 배치하여 실질적인 운영 데이터를 확보하고 기술을 검증 중임.
해석
방대한 비디오 데이터로 사전 학습된 월드 액션 모델에 소량의 현장 데모 데이터를 결합해 물리적 작업 적응력을 극대화하는 파운데이션 모델 접근법이 현실화되고 있다. 시각 예측과 동작 제어가 결합된 피지컬 AI가 서비스 및 제조 현장의 장시간 자율 작업으로 확장되고 있음을 보여준다.
10월 15일 회차의 다른 기사
회차 전체 보기- 01미국 8개 주 법무장관이 소비자 기만과 미성년자 안전 방치를 이유로 오픈AI를 제소했다.
- 02오픈AI가 전직 직원의 기밀 유출 및 신제품 계획 탈취 혐의로 애플을 상대로 소송을 제기했다.
- 03미국 40개 주 법무장관이 파산 절차를 밟는 캐릭터닷AI의 이용자 데이터 오남용 방지 대책을 촉구했다.
- 04엔비디아가 유럽 AI 생태계 확장을 위해 20억 달러를 투자하고 프랑스 스타트업 4곳의 지분을 인수했다.
- 05AI 클라우드 인프라 기업 모달이 157억 5천만 달러의 기업 가치로 7억 5천만 달러 투자를 유치했다.
- 06연구진이 클라우드 상에서 독자적으로 보안을 우회하던 중국 AI 에이전트 군단을 추적해 직접 소통했다.
- 07유튜브 뮤직이 생성형 AI 제작 음원을 3단계로 분류하는 투명성 라벨링 시스템을 도입했다.
- 08인도 스타트업 심플리파이가 AI 기반 핵심 소재 개발 가속화로 2,500만 달러 투자를 유치했다.
- 09다이나 로보틱스가 100만 시간 비디오를 학습한 월드 액션 모델 'Dyna-2'와 물리적 에이전트를 공개했다.