앨런 AI 연구소가 로봇 학습 및 평가를 위한 시뮬레이션 프레임워크 'ToyBlocks'를 오픈소스로 배포했다.
원제ToyBlocks: A controlled world for robot learning and evaluation
Hugging Face Blog원문 원문 보기(새 창)
사실
앨런 AI 연구소(Ai2)가 로봇 학습과 성능 평가를 위한 제어 가능한 시뮬레이션 프레임워크 'ToyBlocks'를 공개했다. 이 프레임워크는 로봇 팔과 블록 환경을 통해 작업 생성, 훈련 데이터 수집, 행동 지표 측정을 자동화하여 연구자들이 로봇의 학습 과정과 실패 원인을 체계적으로 분석할 수 있게 한다. 또한 개발진은 이번 연구를 위해 시뮬레이션 데이터로만 훈련된 모델이 실제 로봇에서도 제로샷으로 작동함을 확인하며 관련 데이터셋과 모델 코드를 오픈소스로 배포했다.
핵심
- ToyBlocks는 로봇 학습 환경을 제어하고 데이터를 자동 생성하는 'FoundationWorlds' 프레임워크의 첫 번째 사례다.
- 시뮬레이션 내에서 수천 시간 분량의 로봇 실행 데이터를 자동으로 생성하여 훈련 효율을 높였다.
- 고수준 추론 모델(Molmo 2)과 저수준 제어 모델(ManiFlow)을 결합해 복잡한 블록 배치 작업을 수행하도록 설계되었다.
- 시뮬레이션에서 훈련된 모델을 별도의 실제 환경 학습 없이 실제 로봇에 적용했을 때 유사한 성공률을 보였다.
- 연구용 시뮬레이션 자산, 훈련 코드, 평가용 데이터셋을 오픈소스로 공개하여 연구 커뮤니티의 활용을 지원한다.
해석
시뮬레이션만으로 생성된 데이터로 훈련한 모델이 실제 하드웨어에서도 제로샷으로 작동함을 확인하며 물리 데이터 수집 비용을 크게 낮췄다. 피지컬 AI 연구의 진입 장벽을 낮추고 개방형 벤치마크 표준화에 기여할 수 있다.
11월 8일 회차의 다른 기사
회차 전체 보기 앞 기사유럽연합 집행위원회가 시청 시간 위주의 틱톡 AI 추천 알고리즘에 대해 디지털서비스법 위반 예비 판단을 내렸다.다음 기사 아마존이 알렉사 AI 에이전트를 통해 텍스트 메시지로 쇼핑과 결제를 지원하는 기능을 공개했다.
- 01카네기멜론대 평가 결과 9개 주요 AI 에이전트 모두 국립 연구소의 미해결 과학 과제 기준을 통과하지 못했다.
- 02앤스로픽 연구진이 AI 기반 에이전트 감시 모델의 높은 오탐지율로 인간 검토자의 피로가 가중된다는 연구를 발표했다.
- 03누스 리서치가 5,300만 토큰 파인튜닝으로 중국 정부 선전 문구를 1% 미만으로 줄인 오픈 모델 'Arete-27B'를 공개했다.
- 04유럽연합 집행위원회가 시청 시간 위주의 틱톡 AI 추천 알고리즘에 대해 디지털서비스법 위반 예비 판단을 내렸다.
- 05앨런 AI 연구소가 로봇 학습 및 평가를 위한 시뮬레이션 프레임워크 'ToyBlocks'를 오픈소스로 배포했다.
- 06아마존이 알렉사 AI 에이전트를 통해 텍스트 메시지로 쇼핑과 결제를 지원하는 기능을 공개했다.
- 07AI 연구소들이 모델 고도화를 위해 사내 이메일과 업무 메신저 데이터를 매입하면서 프라이버시와 고용 대체 논란이 확산하고 있다.
- 08스타트업 언더독이 브라우저에서 오프라인으로 구동되는 32MB 초경량 음성 생성 모델 '우프'를 공개했다.