피지컬 AI의 흐름을 논할 때 최근 글로벌 반도체 및 AI 생태계를 이끌고 있는 엔비디아(NVIDIA)와 젠슨 황(Jensen Huang) CEO의 비전을 빼놓을 수 없습니다. 과거 컴퓨팅 파워를 제공하는 그래픽 카드 제조사에 머물렀던 엔비디아는, 이제 피지컬 AI를 구현하기 위한 하드웨어와 소프트웨어 플랫폼 전체를 주도하는 거대한 생태계 거점으로 자리 잡았습니다.
젠슨 황 CEO가 공식 석상에서 반복해서 강조하는 핵심 메시지가 있습니다. 바로 "인공지능의 다음 거대한 파도는 피지컬 AI(Physical AI)가 될 것"이라는 선언입니다. 그가 제시하는 피지컬 AI의 3단계 진화 모델을 살펴보면, 소프트웨어 속 인공지능이 어떻게 현실의 물리 세계와 완전한 통합을 이루어가는지 명확한 궤적을 이해할 수 있습니다.
1단계: 인지 AI (Perceptual AI) - 세상을 관찰하는 눈
피지컬 AI 진화의 첫 번째 단계는 '인지 AI'입니다. 이 단계의 핵심은 인공지능이 카메라, 라이다, 센서 등 다양한 매체를 통해 외부 물리 세계의 데이터를 수집하고, 그 안에서 사물과 환경을 정확히 구별해 내는 능력입니다.
이 단계는 우리가 앞서 다룬 컴퓨터 비전과 실시간 센서 처리 기술에 해당합니다.
도로 위에 놓인 장애물이 표지판인지, 사람인지, 차량인지 분류하는 작업
공장 컨베이어 벨트 위의 부품 결함을 실시간 픽셀 단위로 선별하는 작업
3D 공간 안에서 벽과 물체 사이의 거리를 센서 데이터로 측정하는 작업
인지 AI 단계에서의 로봇과 AI는 완벽한 '관찰자'에 가깝습니다. 세상의 현상을 정밀하게 데이터화하고 모니터에 보여주는 데 특화되어 있지만, 아직 물리 세계에 직접 개입하여 물체를 변형시키거나 능동적으로 환경을 바꿔놓는 영향력은 한정적입니다.
2단계: 생성 AI (Generative AI) - 맥락을 이해하고 계획하는 뇌
두 번째 단계는 최근 우리가 일상에서 접하고 있는 '생성 AI'와 챗봇, 거대 언어 모델(LLM)이 로보틱스와 결합하는 지점입니다. 텍스트나 이미지를 생성하는 수준을 넘어, 물리 세계의 '상식(Common Sense)'과 '맥락'을 기반으로 행동 계획(Action Planning)을 스스로 만들어내는 단계입니다.
10편에서 다룬 VLA(Vision-Language-Action) 모델이 대표적인 예시입니다. 사람이 "목이 마르다"라는 입력을 주면, 생성 AI 단계의 피지컬 AI는 단순히 문장을 출력하는 데 그치지 않습니다.
냉장고로 이동하는 경로를 계산하고
문을 열어 음료수캔을 찾아내며
캔을 집어 사람에게 가져다주는 일련의 복잡한 행동 시퀀스를 가상 데이터와 지식을 기반으로 '생성'해 냅니다.
단순히 지정된 좌표로만 이동하던 기계가, 비로소 인간의 언어와 상황적 맥락을 이해하여 능동적인 행동 시나리오를 써 내려가는 진짜 '뇌'를 갖추게 되는 시기입니다.
3단계: 물리적 추론 AI (Physical Reasoning AI) - 마찰과 중력을 이해하는 몸
젠슨 황이 정의하는 피지컬 AI의 최종 완성형이자 가장 까다로운 마지막 단계가 바로 '물리적 추론 AI'입니다. 지능을 가진 AI가 실제로 시뮬레이션이나 물리 법칙이 지배하는 현실 환경 속에 뛰어들어, 무게, 마찰력, 관성, 유체 흐름 등의 물리적 제약을 직접 겪으며 인과관계를 추론하는 단계입니다.
이 단계에서는 AI가 가상 세계(Digital Twin)에서 수백만 번의 물리 법칙을 스스로 테스트하며 최적의 제어 알고리즘을 완성합니다.
물체를 집을 때 표면 마찰력에 따라 필요한 악력을 실시간 계산하고
미끄러운 바닥을 밟았을 때 체중 이동을 통해 넘어지지 않도록 관절 토크를 조정하며
로봇의 몸체(Form factor)와 액추에이터가 물리 법칙에 부딪히며 발생하는 오차를 스스로 수정합니다.
엔비디아가 구축한 '아이작 심(Isaac Sim)'이나 '옴니버스(Omniverse)' 같은 플랫폼이 바로 이 3단계 물리적 추론을 가상 공간에서 초고속으로 수행하기 위해 만들어진 거대한 디지털 실험실입니다.
엔비디아의 3가지 컴퓨터 전략 (Three-Computer Architecture)
젠슨 황은 이 3단계 진화를 실제 산업에 적용하기 위해 피지컬 AI 개발에 3개의 컴퓨터 시스템이 동시에 작동해야 한다고 설명합니다.
AI 학습 컴퓨터 (NVIDIA DGX): 차세대 VLA 및 피지컬 AI 파운데이션 모델을 거대 데이터로 사전 학습시키는 초거대 클라우드 서버입니다.
시뮬레이션 컴퓨터 (NVIDIA Omniverse): 로봇이 현실에 투입되기 전 완벽한 물리 엔진 환경에서 수백만 번의 시행착오를 겪도록 돕는 디지털 트윈 서버입니다.
온디바이스 가동 컴퓨터 (NVIDIA Jetson / Thor): 실제 로봇 내부 몸체에 탑재되어 초당 수십~수백 회의 실시간 센서 융합과 제어 명령을 전력 효율적으로 수행하는 최리얼타임 에지 컴퓨팅입니다.
칩셋 제조사를 넘어 피지컬 AI의 표준으로
현장에서 이 흐름을 관찰하며 깨달은 점은, 피지컬 AI의 진화가 단순히 로봇 관절 부품이나 모터 기술의 발전만으로 이뤄지지 않는다는 사실입니다.
거대한 AI 모델을 학습시키는 서버, 물리 법칙을 오차 없이 구현하는 가상 시뮬레이터, 그리고 로봇의 손발 끝에서 실시간으로 연산을 처리하는 에지 하드웨어가 하나의 생태계로 톱니바퀴처럼 맞물릴 때 비로소 젠슨 황이 말하는 '물리 세계를 이해하는 AI'가 완성될 수 있습니다.
핵심 요약 3줄
젠슨 황 CEO는 피지컬 AI의 진화 과정을 관찰하는 '인지 AI', 맥락을 계획하는 '생성 AI', 물리 법칙을 이해하는 '물리적 추론 AI'의 3단계로 정의했습니다.
피지컬 AI 완성을 위해 학습용 서버(DGX), 시뮬레이션용 가상 세계(Omniverse), 로봇 탑재용 온디바이스 에지 칩셋(Thor)이라는 3대 컴퓨터 아키텍처가 동시 가동됩니다.
모니터 속 텍스트와 이미지 생성에 머물던 인공지능은 마찰력과 중력을 이해하는 물리적 추론 단계를 통해 현실 세계의 완전한 자율 기계로 진화하고 있습니다.
다음 편 예고 다음 12편에서는 젠슨 황의 피지컬 AI 3단계 진화론이 실제 인간 형상의 기계에 적용되는 현장, '휴머노이드 로봇에 이식되는 피지컬 AI와 폼팩터의 변화'를 다룹니다.
생각해 볼 질문 인공지능이 모니터 안에서 텍스트로 답을 줄 때와, 직접 물리적 몸을 움직여 현실의 물체를 제어할 때 사용자가 느끼는 가장 큰 '신뢰의 차이'는 어디서 나온다고 생각하시나요?
0 댓글