섹션별 상세
NVIDIA Cosmos 월드 모델과 Isaac 기술을 중심으로 한 물리적 AI 스택이 공개됐다. 이 스택에는 정책 평가를 위한 Isaac Lab-Arena 오픈 소스 프레임워크, 자율 주행차용 Alpamayo 포트폴리오, 그리고 컴퓨팅 환경 전반의 학습을 조율하는 OSMO 프레임워크가 포함된다. OpenUSD는 이러한 도구들 사이에서 3D 데이터를 표준화하여 디지털 트윈의 재사용성을 보장하는 핵심 역할을 수행한다.

Caterpillar는 NVIDIA Nemotron 오픈 모델과 Jetson Thor 에지 AI 모듈을 활용한 'Cat AI Assistant'를 선보였다. 중장비 운전자는 자연어 인터페이스를 통해 장비 조작 가이드를 받거나 안전 파라미터를 음성으로 조정할 수 있다. 또한 Omniverse 라이브러리를 통해 구축된 작업 현장의 디지털 트윈은 실제 배치 전 교통 패턴과 다중 장비 워크플로우를 시뮬레이션하여 운영 효율성을 높인다.
LEM Surgical의 Dynamis 로봇 수술 시스템은 척추 수술의 정밀도를 높이기 위해 NVIDIA의 전체 스택을 도입했다. Jetson AGX Thor를 연산 장치로, Holoscan을 실시간 센서 처리에 사용하며, Cosmos Transfer 월드 모델을 통해 물리 기반 합성 학습 데이터를 생성한다. 이를 통해 인간 외과의의 손재주를 모방한 듀얼 암 휴머노이드 수술 로봇의 정밀한 제어가 가능해졌다.

NEURA Robotics와 AgiBot은 휴머노이드 로봇 학습에 NVIDIA 기술을 적용했다. NEURA Robotics는 Isaac GR00T-Mimic을 사용하여 기초 모델을 사후 학습시키고 SAP의 Joule 에이전트와 통합했다. AgiBot은 Cosmos Predict 2를 백본으로 사용하여 행동 조건부 비디오를 생성하고, 이를 Isaac Sim과 결합하여 시뮬레이션에서 개발된 정책이 실제 휴머노이드 하드웨어로 안정적으로 전이되도록 구현했다.
Hugging Face와의 협력을 통해 NVIDIA Isaac GR00T N 모델이 LeRobot 에코시스템에 통합됐다. 개발자들은 LeRobot 내에서 직접 Isaac GR00T N1.6 모델과 Isaac Lab-Arena에 접근하여 정책 학습과 평가를 수행할 수 있다. 특히 오픈소스 Reachy 2 휴머노이드는 Jetson Thor와 완전히 호환되어 고급 VLA 모델을 실제 환경에 즉시 배포할 수 있는 환경이 마련됐다.
이미지 분석

Photo
NVIDIA의 가속 컴퓨팅과 AI 기술이 우주 과학 분야에서 복잡한 데이터를 빠르게 분석하는 사례를 보여준다. 물리적 AI 기술이 지구상의 로보틱스를 넘어 극한 환경의 데이터 분석에도 적용됨을 시사한다.
AI를 이용해 매핑된 타이탄 위성의 메탄 구름 이미지
용어 해설
- 물리적 AI(Physical AI)
- — AI가 디지털 환경을 넘어 물리적 세계에서 추론하고 상호작용하는 기술이다. 로봇이나 자율주행차와 같은 하드웨어가 센서 데이터를 통해 주변 환경을 이해하고 물리 법칙에 기반해 행동을 결정하는 능력을 의미한다.
- 오픈USD(OpenUSD)
- — 3D 데이터를 기술하고 공유하기 위한 개방형 프레임워크이다. 서로 다른 소프트웨어 간에 복잡한 3D 장면과 에셋을 표준화된 방식으로 교환할 수 있게 하여 디지털 트윈 구축과 협업의 기반이 된다.
- 월드 모델(World Model)
- — 물리적 세계의 작동 방식을 이해하고 예측하도록 학습된 AI 모델이다. 특정 행동에 따른 미래 상태를 시뮬레이션하거나 물리적으로 타당한 합성 데이터를 생성하여 로봇의 학습 효율을 극대화한다.
- 심투리얼(Sim-to-Real)
- — 가상 시뮬레이션 환경에서 학습된 AI 정책이나 모델을 실제 물리적 로봇에 적용하는 과정이다. 시뮬레이션과 현실의 간극을 줄여 실제 환경에서의 시행착오와 위험을 최소화하는 것이 핵심이다.
- VLA 모델(VLA Model)
- — 시각(Vision), 언어(Language), 행동(Action)을 통합하여 처리하는 모델이다. 시각적 정보와 언어적 명령을 입력받아 로봇이 수행해야 할 구체적인 물리적 동작을 직접 출력하는 엔드투엔드 아키텍처를 가진다.
기술
- NVIDIA Cosmos
- NVIDIA Isaac
- Jetson Thor
- NVIDIA Omniverse
- OpenUSD
- Nemotron
- Holoscan
활용 사례
- 휴머노이드 로봇 학습
- 정밀 로봇 수술 시스템
- 중장비 AI 어시스턴트
- 산업 현장 디지털 트윈 시뮬레이션
AI 분석 전체 내용 보기
AI 요약 · 북마크 · 개인 피드 설정 — 무료
출처 · 인용 안내
원문 발행 2026. 01. 30.수집 2026. 02. 21.출처 타입 RSS
인용 시 "요약 출처: AI Trends (aitrends.kr)"를 표기하고, 사실 확인은 원문 보기 기준으로 진행해 주세요. 자세한 기준은 운영 정책을 참고해 주세요.