픽셀에서 토크까지: Figure AI의 Helix 02가 거동 조작(Loco-Manipulation) 문제 해결 — 가정용 로봇 공학의 가장 어려운 난제 | 웜코어 테크
AI 아키텍처 · 전신 자율성 심층 기술 분석 · 2026년 4월 8일

픽셀에서 토크까지: Figure AI의 Helix 02가 거동 조작(Loco-Manipulation) 문제 해결 — 가정용 로봇 공학의 가장 어려운 미해결 문제

2026년 1월 27일, Figure AI는 Helix 02를 공개했습니다. 이 단일 신경 시스템은 인간형 로봇의 전신(다리, 몸통, 팔, 개별 손가락)을 카메라 픽셀에서 직접 제어하며, 인간의 개입이 전혀 없습니다. 로봇은 61가지 연속 동작을 포함하는 4분짜리 식기세척기 작업을 완료했습니다. 그 다음 거실을 청소했고, 야외에서 조깅도 했습니다. 로봇 공학자들이 "어쩌면 불가능할지도 모른다"고 말했던 문제가 작동하는 해결책을 찾은 것입니다.

신경망 시각화 — 인간형 전신 제어 거동 조작을 위한 AI 아키텍처
Helix 02는 109,504줄의 수동 C++ 코드를 1,000시간 이상의 인간 동작 데이터로 훈련된 단일 1,000만 매개변수 신경망으로 대체합니다. Helix 02를 실행하는 Figure 03 하드웨어는 인간 감독 없이 24시간 내내 완전 자율 작동을 시연했습니다. | Unsplash 제공 사진

01 — 문제점: 왜 거동 조작(Loco-Manipulation)이 수십 년간 로봇 공학을 좌절시켰는가

매일 아침 생각 없이 하는 기만적으로 단순한 일이 있습니다. 침실에서 부엌으로 걸어가 머그잔을 들고 물을 채운 다음 다시 가져와 테이블에 놓는 것입니다. 이 일련의 모든 단계는 로봇 공학 연구자들이 거동 조작(loco-manipulation)이라고 부르는 것을 필요로 합니다. 즉, 이동(locomotion)과 조작(manipulation)의 동시적이고 연속적인 결합입니다. 무언가를 들고 걷기. 균형을 잡으면서 팔을 뻗기. 멈추지 않고 예기치 않은 접촉에서 회복하기.

수십 년 동안 이것은 로봇 공학에서 가장 어려운 미해결 문제 중 하나였습니다. 걷는 것이 어렵기 때문도 아니고, 물체 조작이 어렵기 때문도 아닙니다. 이 두 가지를 동시에 수행해야 할 때, 몸체가 중심을 변화시키는 팔 때문에 계속해서 균형을 잡아야 하는 상황에서, 엔지니어들이 선호하는 깔끔한 분해를 거부하기 때문입니다. 표준 해결책은 "정지-이동" 패러다임이었습니다. 목적지로 걸어가 멈추고, 안정화한 다음, 팔을 뻗어 잡고, 다시 걷는 것입니다. 이러한 인계는 느리고 취약하며 인간의 움직임과는 전혀 다릅니다. 예기치 않은 편차(흔들림, 물건 떨어뜨림, 고르지 않은 바닥)는 전체 시퀀스를 실패하게 만듭니다.

"수십 년 동안 거동 조작(loco-manipulation)은 로봇 공학에서 가장 어려운 미해결 문제 중 하나였습니다. 개별 능력은 어렵지 않지만, 두 가지를 동시에 수행하는 것이 깔끔한 분해를 거부하기 때문입니다." — Figure AI, Helix 02 공식 발표

Helix 02 이전에 공개적으로 시연된 모든 인간형 로봇은 어느 정도 이 문제를 우회했습니다. 보스턴 다이내믹스의 백플립, 유니트리의 무술 루틴과 같은 인상적인 시연조차도 실시간 피드백이 제한된 미리 계획된 동작입니다. 이는 환경이 예상대로 정확히 협력할 때 로봇이 무엇을 할 수 있는지를 보여줍니다. Helix 02는 그렇지 않을 때 어떤 일이 발생하는지를 다루는 최초의 시스템입니다.

61 4분 식기세척기 시연에서 연속 동작
109K 하나의 신경망으로 대체된 C++ 코드 줄 수
200Hz 실시간 전신 관절 제어 속도

02 — 아키텍처: 시스템 0, 1, 2 — 세 가지 속도, 하나의 몸체

Helix 02의 기술적 핵심은 각 계층이 기능에 적합한 시간 척도로 작동하는 3계층 계층적 아키텍처입니다. Figure가 "시스템 0, 1, 2" 설계라고 부르는 핵심 통찰은 로봇 몸체가 의미적으로는 느리게, 운동적으로는 빠르게, 물리적으로는 즉각적으로 세 가지 매우 다른 속도로 동시에 추론해야 한다는 것입니다.

S2 7–9 Hz
시스템 2 — 의미론적 추론 계층
인터넷으로 사전 훈련된 비전-언어 모델. 장면을 해석하고, 자연어 지시를 이해하며, 고급 작업 시퀀스를 계획합니다. "식기세척기로 걸어가서 열어라"는 밀리초 단위의 업데이트가 필요하지 않으므로 천천히 실행될 수 있습니다. 광범위한 일반화를 가능하게 합니다. 훈련에서 한 번도 본 적 없는 객체와 지시에 대해 추론할 수 있습니다.
S1 200 Hz
시스템 1 — 전신 시각-운동 정책
"픽셀에서 전신까지" 계층. 헤드 카메라, 손바닥 카메라, 손가락 촉각 센서 및 전신 고유 수용 감각에서 시각적 입력을 받아 다리, 몸통, 머리, 팔, 손목 및 개별 손가락을 포함한 로봇 전체의 완전한 관절 수준 제어를 동시에 출력합니다. 물리적 세계에 실시간으로 반응하기 위해 200Hz로 실행됩니다. 이 계층은 Helix 02에 새로 추가된 것으로, 원래 Helix는 상체만 제어했습니다.
S0 1,000 Hz
시스템 0 — 물리적 기초 계층 (Helix 02에 새로 추가됨)
새로 추가된 핵심 요소. 20만 개 이상의 병렬 시뮬레이션 환경에서 1,000시간 이상의 인간 동작 데이터로 훈련된 1,000만 매개변수 신경망 사전. 109,504줄의 수동 C++ 코드를 균형과 안정성을 유지하면서 인간의 몸이 어떻게 움직이는지에 대한 단일 학습 모델로 대체합니다. 균형 교정이 즉각적이어야 하므로 1kHz로 실행됩니다. Figure는 이를 "인간과 유사한 전신 제어를 위한 기초 모델"이라고 설명합니다. 전적으로 시뮬레이션에서 훈련되었으며 실제 하드웨어로 직접 전송됩니다.

세 가지 시스템은 독립적인 모듈이 아닌, 서로 통신하도록 엔드-투-엔드로 훈련됩니다. S2는 S1이 시각-운동 제어를 위한 컨텍스트로 읽는 잠재적 의미 표현을 생성합니다. S1의 출력은 S0의 물리적 실행으로 피드됩니다. 그 결과, "무엇을 하려는지 천천히 생각"하면서도 "실제로 빠르게 행동"하고, 이 두 가지 과정 아래에서 "지속적으로 균형"을 잡는 로봇이 탄생합니다. 이 세 가지 과정 중 어느 것도 서로를 위해 멈추지 않습니다.

03 — 시연: 식기세척기, 거실, 야외

Figure는 2026년 1월 이후 Helix 02의 주요 시연 세 가지를 공개했으며, 각 시연은 시스템이 처리할 수 있는 범위가 확장되었음을 보여줍니다. 이들은 통제된 주방 환경에서부터 구조화되지 않은 야외 공간까지 명확한 궤적을 그립니다.

2026년 1월 27일
주방: 4분 식기세척기 주기 — 61가지 동작, 재설정 없음
식기세척기로 걸어가서 열고, 접시를 내리고, 방을 가로질러 이동하고, 캐비닛에 물건을 쌓고, 돌아와서 식기세척기에 다시 넣고, 사이클을 시작합니다. 완전히 자율적이며, 완전히 내장되어 있고, 인간의 개입이 없습니다. Figure는 이를 지금까지 인간형 로봇이 자율적으로 완료한 가장 긴 시간 범위의 가장 복잡한 작업이라고 불렀습니다. 로봇은 심지어 손이 가득 찼을 때 발로 식기세척기 문을 밀어서 열었습니다.
2026년 3월
거실: 스프레이, 닦기, 던지기, 클릭
어질러진 거실로 걸어 들어갑니다. 스프레이 병을 집어 표면에 뿌리고, 수건으로 닦습니다. 장난감을 모아 상자에 던져 넣습니다. TV 리모컨을 누릅니다. 베개를 다시 놓습니다. 모두 연속적인 장면으로, 주방 시연과 동일한 신경 시스템이며 추가 프로그래밍이 필요하지 않습니다. Helix 02는 데이터에서 학습합니다. 작업 예시를 추가하면 새로운 코드 없이도 레퍼토리가 확장됩니다.
2026년 4월
야외: 2m/s 조깅, 24시간 무감독 작동
Helix 02를 실행하는 Figure 03은 약 2m/s의 속도로 조깅하는 것을 포함하여 연속적인 무감독 야외 작동을 시연했습니다. 별도로 회사는 인간 감독 없이 24시간 내내 완전 자율 야간 주행을 시연했습니다. 이는 모든 가정용 로봇 배치가 답해야 하는 "아무도 보고 있지 않을 때 무슨 일이 일어나는가"라는 질문에 직접적으로 답하는 것입니다.

04 — 하드웨어: Helix 02를 위해 제작된 Figure 03의 센서 스위트

Helix 02는 단순한 소프트웨어 혁신이 아닙니다. Figure 03 하드웨어는 AI 아키텍처의 요구사항, 특히 시스템 1의 전신 시각-운동 정책이 읽어야 하는 새로운 센서 양식에 맞춰 공동 설계되었습니다. 세 가지 추가 사항이 눈에 뜁니다.

손가락 끝 촉각 센서는 종이 클립 무게에 해당하는 3g 정도의 낮은 힘에도 민감하게 반응하여, 로봇이 미끄러지기 전에 안전한 그립과 임박한 미끄러짐을 구분할 수 있게 합니다. 이 정도 수준의 힘 피드백은 수백 그램의 과도한 힘으로 파괴될 수 있는 깨지기 쉬운 물체(유리 제품, 달걀, 약, 얇은 전자제품)를 다룰 수 있게 합니다. 손바닥에 장착된 카메라는 로봇의 손이 작업 자체로 가려졌을 때(예: 통에 손을 넣거나, 아래에서 물체를 다루는 상황) 머리 카메라가 유용한 정보를 잃을 수 있는 상황에서 시각적 피드백을 제공합니다. 10Gbps mmWave 무선 데이터 오프로드는 Figure 03이 유선 연결 없이 지속적인 전체 플릿 학습을 위해 테라바이트 규모의 작동 데이터를 업로드할 수 있게 합니다.

기능 Helix (원래) Helix 02
몸체 범위 상체만 로봇 전체 — 다리, 몸통, 팔, 손가락
기초 계층 없음 1kHz 시스템 0 — 인간 동작 신경 사전
조작 중 균형 정지 및 안정화 필요 연속적 — 들고 걷기, 움직이면서 팔 뻗기
촉각 입력 제한적 3g 해상도 손가락 끝 센서 + 손바닥 카메라
시연된 작업 시간 범위 짧은 시퀀스, 단일 방 4분 전체 주방 사이클, 다중 방, 야외
새로운 기술 습득 새로운 코드 또는 시연 필요 자연어 — 원하는 것을 말하면 로봇이 수행
야간 자율 작동 시연되지 않음 시연됨 — 인간 감독 없이 24시간 작동

05 — 다음 단계: 24시간 작동, 공장 플릿, 가정 내 파일럿

Figure CEO 브렛 애드콕은 Helix 02를 기반으로 한 구체적인 2026년 로드맵을 발표했습니다. 목표는 공격적이지만, 희망적인 예측이 아니라 시연된 능력에 기반을 두고 있습니다.

2026년 — 현재
생산 라인 배치: Figure 03은 제조 환경에서 작업하기 시작하며, Figure 02가 11개월 동안 90,000개 이상의 부품을 처리한 BMW 스파르탄버그 파일럿과 유사하거나 이를 확장한 작업으로 시작합니다.
2026년 4분기
완전히 새로운 환경에서의 장기 작업 가정 파일럿 — 로봇이 이전에 가본 적 없는 집에 들어가서 사전 시설 매핑이나 작업 프로그래밍 없이 복잡한 가정 작업을 수행합니다.
2027년–2028년
로봇이 만든 로봇: Figure의 BotQ 제조 시설은 연간 12,000대, 4년 동안 100,000대 규모를 목표로 하며, 자체 생산 라인에 Figure 로봇을 사용하여 로봇과 그 제조 사이의 루프를 닫습니다.
진행 중
초인적인 속도와 정밀도를 목표로 하는 하드웨어 업그레이드 — Figure는 단순히 인간 수준의 능력이 아니라 속도와 정확도 면에서 특정 물리적 작업에서 인간의 성능을 능가하는 하드웨어를 목표로 한다고 명시적으로 밝혔습니다.

06 — Helix 02가 Figure AI를 넘어 중요한 이유

Helix 02의 중요성은 Figure AI의 제품 로드맵에만 국한되지 않습니다. 이는 로봇 공학 분야 전체가 주시하고 있는 아키텍처 접근 방식(모듈식 분해 없이 센서에서 액추에이터까지 엔드-투-엔드 신경 제어)에 대한 개념 증명입니다. 이 접근 방식이 일반화된다면, 새로운 로봇 동작을 개발하는 데 필요한 비용 모델을 수개월의 엔지니어링 작업에서 며칠의 데이터 수집 및 훈련으로 바꿀 것입니다.

Figure의 스케일링 곡선 차트가 보여주듯이, 전통적인 로봇 공학 패러다임은 새로운 동작을 프로그래밍하기 위해 전문 엔지니어가 필요했습니다. 즉, 기술당 박사 학위와 수백 번의 시연이 필요했습니다. Helix 02는 이러한 방정식을 바꿉니다. 새로운 기능은 훈련 데이터에 작업 예시를 추가함으로써 습득됩니다. 모델은 그 예시들로부터 학습합니다. 로봇에게 주방 청소를 가르치고, 거실 예시를 추가하면 침실 청소도 별도의 개발 없이 따라옵니다. 이것은 대규모 언어 모델을 강력하게 만든 것과 동일한 스케일링 역학입니다. Figure는 이를 물리적 지능에 적용하고 있습니다.

AI 동반자 및 고정밀 상호 작용 분야에서 활동하는 기업들에게 Helix 02는 "전신 AI"가 무엇을 의미하고 무엇을 가능하게 하는지에 대한 새로운 기준점을 제시합니다. 낯선 집에 들어가 복잡한 가사 작업을 자율적으로 수행할 수 있는 로봇은 단순히 산업 도구가 아닙니다. 이는 동반자 AI가 기다려온 물리적 기반입니다. 로봇을 정교한 기기 이상으로 느끼게 하는 종류의 지속적이고 적응적인 전신 존재감을 제공할 수 있는 하드웨어입니다.

2026년 4분기로 예정된 가정 파일럿은 가장 중요한 시험이 될 것입니다. 공장 환경은 통제됩니다. 가정은 그렇지 않습니다. Helix 02를 실행하는 Figure 03이 깨지기 쉬운 물건, 고르지 않은 표면, 예상치 못한 장애물, 그리고 공장 근로자처럼 행동하지 않는 사람들과 같은 소비자 로봇이 처리해야 하는 가변적이고 예측 불가능하며 사람이 거주하는 환경에서 안정적으로 작동할 수 있다면, 상업적으로 실행 가능한 가정용 동반자 로봇의 출시 시기는 크게 단축될 것입니다. 그 결과가 보장되지는 않습니다. 그러나 이를 시도할 수 있는 아키텍처는 이제 작동하는 하드웨어로 공개적으로 존재합니다.

당신이 좋아할 수도 있습니다