NVIDIA Project GR00T, Isaac Sim 플랫폼으로 휴머노이드 파운데이션 모델 발전시켜
NVIDIA는 Isaac Sim 플랫폼에 시뮬레이션-현실 툴킷을 추가하여 Project GR00T를 확장했습니다. 이를 통해 휴머노이드 개발자들은 합성 훈련 데이터에서부터 배포 가능한 범용 로봇 정책에 이르는 과정을 더욱 긴밀하게 연결할 수 있게 되었습니다.
초안용 시각적 플레이스홀더. 게시 전에 로컬 자산 경로를 Shopify CDN URL로 교체하십시오.
요약
Isaac Sim에서 확장된 Project GR00T 툴킷은 휴머노이드 개발자들에게 합성 데이터 생성, 정책 훈련, 시뮬레이션-현실 검증을 위한 단일 환경을 제공합니다. NVIDIA는 인간 환경에서 작동해야 하는 로봇을 위한 다양하고 고품질의 훈련 데이터 부족이라는 휴머노이드 배포의 가장 어려운 병목 현상 중 하나를 해결하고 있습니다.
로봇 시장에서 중요한 신호는 모델 자체만이 아닙니다. 데이터 생성, 시뮬레이션, 제어 및 배포 도구가 하나의 워크플로우로 통합되는 모델 주변의 인프라입니다.
Project GR00T란?
Project GR00T는 Generalist Robot 00 Technology의 약자로, 휴머노이드 로봇을 위한 파운데이션 모델을 구축하기 위한 NVIDIA의 이니셔티브입니다. 이 모델들은 자연어를 이해하고, 시연을 관찰하며, 모든 움직임이나 환경에 대해 별도의 맞춤형 프로그램이 필요 없이 작업을 일반화하도록 설계되었습니다.
이 프로젝트는 휴머노이드 로봇공학의 핵심 과제를 해결합니다. 고정된 산업용 로봇 팔과 달리, 휴머노이드는 물체, 사람, 표면, 작업 지시가 끊임없이 변하는 비구조화된 공간에서 작업해야 합니다. 이로 인해 스크립팅된 동작보다 데이터 확장성과 일반화가 더 중요해집니다.
Isaac Sim 통합 및 새로운 기능
최신 Isaac Sim 통합은 휴머노이드 개발 속도에 직접적인 영향을 미치는 세 가지 기능을 통해 GR00T 워크플로우를 심화합니다.
GR00T-Gen
소수의 시연을 객체 위치, 조명, 레이아웃 및 교란 시나리오에 걸쳐 다양한 궤적으로 확장하는 합성 데이터 생성 워크플로우입니다.
GR00T-Mimic
물리적 하드웨어에서 시연을 수집하는 비용을 줄이기 위해 혼합된 인간 및 합성 데이터로 로봇 정책을 훈련하는 모방 학습 프레임워크입니다.
GR00T-Control
상위 정책 출력을 균형, 접촉 및 충돌 제약 조건을 처리하면서 안정적인 로봇 동작으로 변환하는 전신 제어 계층입니다.
이 도구들은 GPU 가속 물리, 렌더링 및 로봇 통합을 제공하는 Isaac Sim 내에서 실행됩니다. 개발자들에게 이는 물리적 로봇 시간이 병목 현상이 되기 전에 더 많은 훈련 주기가 발생할 수 있음을 의미합니다.
휴머노이드에 파운데이션 모델이 중요한 이유
전통적인 휴머노이드 제어는 수작업으로 코딩된 상태 기계, 동작 라이브러리 또는 작업별 강화 학습에 의존합니다. 각 새로운 작업은 몇 주간의 엔지니어링을 필요로 할 수 있습니다. 파운데이션 모델은 세 가지 실용적인 방식으로 배포 논리를 변경합니다.
- 일반화: 많은 시연을 통해 훈련된 모델은 알려진 기술을 새로운 작업 시퀀스로 구성할 수 있습니다.
- 언어 기반 학습: 자연어가 작업 인터페이스가 되어 모든 운영 환경에서 전문 제어 소프트웨어의 필요성을 줄입니다.
- 다체화 학습: 모델이 작업 이해와 형태별 제어를 분리할 때 다양한 휴머노이드 형태에 정책을 적용할 수 있습니다.
휴머노이드 로봇공학에서 가까운 미래의 경쟁은 누가 가장 유능한 로봇 본체를 만들 것인가에만 국한되지 않습니다. 누가 로봇 동작을 안전하게 대규모로 훈련, 검증 및 업데이트할 수 있는가에 달려 있습니다.
로봇 운영자를 위한 시사점
창고, 소매 공간, 안내 환경 및 서비스 환경에 휴머노이드를 배포하는 기업에게 GR00T-Isaac Sim 스택은 세 가지 운영 변화를 시사합니다.
- 시뮬레이션 우선 개발: 물리적 로봇 시간은 유효성 검사 단계가 되며, 유일한 개발 환경이 아닙니다.
- 데이터를 해자로: 원격 조작 및 시연 데이터의 품질과 다양성이 실제 성능을 형성할 것입니다.
- 서비스 로봇 공학 가속화: 창고 휴머노이드에 사용되는 동일한 파이프라인이 안내, 소매 및 동반 로봇 행동 설계에 영향을 미칠 수 있습니다.
웜코어의 관점
NVIDIA의 GR00T-Isaac Sim 통합은 웜코어 테크가 AI 동반 로봇 및 휴머노이드 시스템 전반에서 추적해 온 방향을 지지합니다. 즉, 자연어를 기본 제어 표면으로 사용하고, 시뮬레이션 지원 안전 검증을 통해 로봇 동작이 서비스 작업 전반에 걸쳐 적응할 수 있도록 합니다.
웜코어의 플랫폼에게 있어 실제적인 과제는 일반적인 창고 자동화와는 다릅니다. 동반 로봇 및 서비스 로봇은 대화형 제어를 안전하고 예측 가능하며 사회적으로 적절하게 느끼도록 만들어야 합니다. 이는 상호 작용 데이터, 사용자 의도, 응답 시간, 물리적 행동의 한계에 대한 도메인별 미세 조정이 필요합니다.
구현형 AI 인프라가 성숙해짐에 따라 동반 로봇 설계는 모델 기능과 제품 수준의 상호 작용 규율(명확한 작업 경계, 안전한 움직임, 현실적인 응답 시간 및 서비스별 개성 설계) 모두에 달려 있습니다.
출처: NVIDIA Research - Project GR00T: Generalist Robot 00 Technology
