엔비디아가 물리 인공지능(AI) 개발자를 위한 세계모델(world model) 플랫폼 '코스모스'를 대폭 확장했다. 새로운 학습 도구와 시뮬레이션 체크포인트, 데이터 파이프라인 자동화 도구 'Cosmos Data Factory' 블루프린트 5종을 공개했다.

세계모델, 왜 물리 AI의 핵심인가

세계모델이란 로봇, 자율주행차, 산업용 AI 시스템이 현실 세계를 이해하고 시뮬레이션하도록 학습시키는 신경망이다. 단순히 이미지를 분류하는 것을 넘어 "카메라 영상을 보면 다음 프레임이 어떻게 변할까"를 예측하는 동영상 생성형 모델이다.

엔비디아 코스모스 플랫폼은 6개의 서로 다른 공개 모델 리더보드에서 상위 5위를 차지했다. 기업들이 코스모스를 선택하는 이유는 최첨단 모델뿐 아니라 학습·최적화·배포를 위한 완전한 도구 생태계를 제공하기 때문이다.

합성 데이터 생성으로 개발 주기 90% 단축

코스모스 데이터팩토리는 GPU 가속 기반의 비디오 데이터셋 큐레이션 솔루션이다. 이를 통해 라벨링, 데이터 증강, 합성 데이터 생성을 자동화한다.

새로 공개된 5개 클라우드 네이티브 블루프린트는 다음과 같다:

• 자율주행 데이터셋 생성: 실제 운전 영상을 큐레이션하고, 드물거나 포착하기 어려운 시나리오(악천후, 사고 상황)를 합성 영상으로 추가해 학습 데이터를 확대한다.
• 이미지 속성 증강: 물체의 모양·색·조명을 변형해 이미지 검색 성능을 개선한다.
• 이벤트 비디오 생성: 정지 이미지를 합성 동영상으로 변환해 희귀하거나 위험한 상황을 재현한다.
• 결함 이미지 생성: 인쇄회로기판, 금속, 유리의 결함 이미지를 자동 생성해 검사 모델을 학습시킨다.
• 비디오 데이터 증강: 날씨·조명을 변경하면서도 장면 구조는 유지한다.

실제 성과는 놀랍다. 포르쉐는 폭스바겐 그룹 전체에 적용할 자율주행 데이터 플라이휠을 구축했다. 결과적으로 실제 테스트 드라이브를 90%까지 줄였고, 개발 주기를 85% 단축했다. 지난해 비슷한 프로젝트는 몇 개월씩 늘어나곤 했는데, 이번엔 실제 물리 테스트 없이 합성 데이터로 대체한 것이다.

ANYbotics는 코스모스 데이터팩토리로 1,500개의 합성 비디오 클립을 생성해 산업용 검사 로봇을 학습시켰고, 액체 누출 같은 이상 상황을 정확히 감지할 수 있게 됐다.

코스모스 3 Nano: 32B 모델을 8B로 축소해도 성능 유지

새로운 'Cosmos Framework'는 오픈소스 모델들(GR00T, Alpamayo, QWEN, Pi0.5 등)을 직접 파인튜닝, 강화학습으로 적응시키고, 디스틸레이션과 양자화로 경량화한다. 모든 과정이 에이전트 스킬로 제공돼 자동화 가능하다.

로봇 연구소 MicroAGI는 코스모스 3(32억 개 파라미터)을 사람이 물체를 조작하는 영상으로 추가 학습한 뒤, 8억 개 파라미터의 'Nano' 버전으로 디스틸레이션했는데도 정확도 손실이 없었다. 이는 엣지 디바이스나 로봇 로컬 GPU에서 실행 가능한 경량 세계모델을 만들 수 있다는 뜻이다.

배포 성능: 추론 2배 빠르고, 비디오 스트림 40% 더 처리

새로운 'Cosmos 3 NIM' 마이크로서비스는 2배 빠른 추론 속도를 제공한다 (품질 손실 없음). 실시간 비디오 분석으로 1초 이내 알림을 구현할 수 있다.

엔비디아 메트로폴리스 비디오 검색·요약(VSS) 3.3은 코스모스 NIM을 기반으로 한다. 하나의 프롬프트를 입력하면 비디오 AI 애플리케이션이 자동으로 구성되며, 동일한 GPU로 40% 더 많은 비디오 스트림을 모니터링할 수 있다.

중동 석유 기업 ADNOC는 포그스피어의 MistIQ 에이전트 플랫폼(코스모스 기반)으로 65개 사이트에서 실시간 안전 위험을 감지한다. 드물게 발생하는 위험 상황은 코스모스 데이터팩토리의 합성 데이터로 학습시켜, 실제로 위험한 상황을 만들지 않고도 모델을 고도화한다.

왜 이것이 중요한가

세계모델은 로봇·자율주행·산업용 AI의 차세대 기술이다. 지금까지 대부분의 개발사들은 모델 학습에만 집중해 엣지 케이스(드물지만 중요한 시나리오)를 놓쳤다. 엔비디아는 이번에 데이터 생성-학습-최적화-배포의 완전한 파이프라인을 제공함으로써, 중소 개발팀도 글로벌 수준의 물리 AI를 만들 수 있는 환경을 열었다.

특히 합성 데이터의 위력이 명확하다. 포르쉐 사례처럼 실제 테스트 드라이브를 대폭 줄이면, 개발 속도와 안전성이 동시에 높아진다. 이는 자율주행차 출시 일정 단축, 로봇의 현장 적응 시간 단축으로 이어진다.

국내 개발사들에게 의미

국내 자율주행·로봇·산업용 검사 솔루션 업체들은 마이크로소프트 애저, Nebius, CoreWeave 같은 클라우드 서비스를 통해 코스모스 데이터팩토리에 직접 접근할 수 있다. 그간 데이터 생성과 라벨링에 수개월을 쏟던 프로젝트들이, 이제는 블루프린트 몇 개를 선택하고 GPU 몇 시간만에 대규모 합성 데이터를 확보할 수 있게 됐다. 국내 AI 스타트업과 중소 제조사도 글로벌 최고 수준의 물리 AI 개발에 진입할 수 있는 기회다.