제미나이 로보틱스 2 전신 제어 — 균형 잡으며 물건 찾아 담는 휴머노이드의 원리

핵심 메시지

• 세상은 인간의 몸에 맞게 설계돼 있지만, 로봇에게는 수많은 관절을 조화롭게 움직이는 일 자체가 어려운 과제다.
• 제미나이 로보틱스의 체화 추론 모델이 눈에 보이는 상황과 자연어 지시를 이해한 뒤, 비전-언어-행동 모델을 불러 실제 동작을 만들어 낸다.
• 물건을 집는 단순한 동작에도 발부터 손끝까지 모든 관절과 구동기를 조율하며 균형을 유지하는 판단이 1초도 안 되는 사이에 이뤄져야 한다.
• 로봇은 어질러진 환경에서 필요한 물건을 골라 제자리에 넣고, 실패를 스스로 인식해 다시 시도하는 모습을 보였다.
• 개발진은 현실에서 쓸모 있는 일을 해내는 범용 로봇을 목표로 하며, 전신 제어를 그 목표의 필수 조건으로 본다.

쉽게 이해하기

구글 딥마인드가 공개한 이 영상은 제미나이 로보틱스 2를 탑재한 휴머노이드 로봇이 집 안에서 아이들의 운동 가방을 챙기는 장면을 통해 '전신 제어'가 왜 어려운 문제인지 보여 준다. 출연 연구진은 인간의 몸에는 수많은 근육과 관절이 있고 세상은 그런 인간에 맞춰 설계돼 있지만, 로봇에게는 그런 조화로운 움직임이 당연하지 않다는 점에서 이야기를 시작한다.

시연에서 사람이 '아이들이 오늘 운동을 하는데 짐 싸는 걸 도와줄 수 있겠냐'고 말하자, 로봇은 일정표를 확인해 한 아이는 오후 2시에 피클볼 경기가, 다른 아이는 오후 4시에 야구 경기가 있다는 것을 파악하고 작업에 착수한다. 지시를 그대로 실행하는 것이 아니라 맥락을 조회해 필요한 물건을 스스로 추론하는 흐름이다.

내부 구조는 두 층으로 설명된다. 제미나이 로보틱스의 체화 추론 모델이 세계를 이해하고, 자신이 본 것과 자연어 지시를 해석한다. 그다음 비전-언어-행동 모델을 호출해 로봇을 제어할 실제 행동을 만들어 낸다. 복잡한 작업일수록 이 두 단계의 협업이 중요해진다.

여기서 진짜 난이도가 드러난다. 물건 하나를 집으려면 발부터 손끝까지 모든 관절과 구동기를 함께 움직여야 하고 동시에 균형을 잃지 않아야 한다. 몸이 앞으로 기울어 넘어지려 하면 다리를 뒤로 밀어야 하는데, 이런 판단이 1초도 되지 않는 사이에 이뤄져야 한다는 것이다.

연구진은 어질러진 환경을 일부러 만들어 놓고 로봇이 그 안을 돌아다니며 올바른 물건을 골라 제자리에 넣는지 확인한다. 중간에 사람이 '왼쪽 바닥에 긴 가방을 놓았으니 찾아서 탁자에 올려 달라'는 즉석 과제를 던지며 반응성을 시험하기도 한다. 실패했을 때 스스로 실패를 알아차리고 다시 시도하는 모습도 함께 소개된다.

주요 인사이트

• 이 시연의 초점은 손재주 하나가 아니라 몸 전체의 협응이다. 사람에게는 사소한 동작도 로봇에게는 몸 곳곳에서 수많은 결정을 동시에 내려야 하는 문제로 바뀐다.
• 추론과 행동을 분리한 구조가 눈에 띈다. 상황을 이해하는 모델과 실제 관절을 움직이는 모델이 나뉘어 있어, 언어로 주어진 복잡한 요구를 단계적으로 물리적 동작으로 옮길 수 있다.
• 균형 유지가 별도 기능이 아니라 작업 수행의 일부로 다뤄진다. 기울어짐을 감지해 다리로 되미는 보정이 순간적으로 일어나야 물건을 집는 동작이 완성된다.
• 실패 인식과 재시도는 실사용 환경에서 특히 중요한 능력이다. 정돈되지 않은 공간에서는 한 번에 성공하지 못하는 것이 정상이기 때문이다.
• 연구진은 로보틱스의 발전 속도가 매우 빠르다고 보며, AI를 로보틱스 퍼즐에서 빠져 있던 조각으로 표현한다. 범용 로봇이라는 목표에서 전신 제어는 선택이 아니라 필수 조건으로 제시된다.

자주 묻는 질문

관련 AI 소식