엔비디아, 두 프롬프트 데이터 워크플로 공개

최근 30일 조회수 — 좋아요 —

핵심 요약

엔비디아 코스모스가 환경 설정과 작업 지시만으로 피지컬 AI용 합성 데이터를 생성·평가한다.

엔비디아, 두 프롬프트 데이터 워크플로 공개 — 기사 주제를 표현한 AI 생성 개념 삽화
AI 생성 개념 삽화 · 실제 사건을 촬영한 사진이 아닙니다.

엔비디아가 피지컬 AI 학습용 데이터를 두 개의 프롬프트로 준비하는 엔비디아 코스모스(NVIDIA Cosmos) 워크플로를 공개했다. 첫 프롬프트로 데이터 처리 환경을 구성하고, 두 번째 프롬프트로 목적에 맞는 작업을 실행하는 방식이다. 희귀 사고나 제품 결함처럼 실제 촬영에 시간과 비용이 많이 드는 사례를 합성 데이터로 보완하는 데 초점을 맞췄다.1

코스모스는 월드 모델 개발을 위한 모델·데이터셋·프레임워크·스킬을 묶은 개방형 플랫폼이다. 이 가운데 코스모스 데이터 팩토리(Cosmos Data Factory·CDF)는 데이터 선별과 처리, 합성 데이터 생성(SDG)을 지원하는 클라우드 네이티브 블루프린트 5개와 조합 가능한 스킬 6개로 구성된다. 프런티어 AI 에이전트가 작업 순서와 서비스 배포, 클러스터 실행을 맡는 CDF 오케스트레이션(CDF Orchestration)을 제어해 사람의 단계별 개입 없이 ‘프롬프트에서 데이터까지’ 이어지도록 설계됐다.

첫 프롬프트는 코딩 에이전트에 CDF 오케스트레이션 저장소를 복제하고 사전 점검과 설정을 실행하라고 지시한다. 사전 점검은 시스템을 바꾸지 않은 채 누락된 요구 사항을 찾고, 이를 통과하면 설정 단계가 블루프린트를 실행할 환경을 준비한다. 두 번째 프롬프트에는 만들 데이터와 변형 조건, 평가 기준을 자연어로 적는다.

공개된 활용 사례는 자율주행 장면 생성, 사람 이미지의 의류·액세서리·색상 변경, 영상의 날씨·조명·환경 변환, 희귀 사건 영상 생성, 시각 검사에 쓸 결함 이미지 생성 등 다섯 가지다. 자율주행 사례에서는 코스모스 큐레이터(Cosmos Curator)가 입력 영상의 메타데이터를 추출하고, 코스모스 데이터셋 서치(Cosmos Dataset Search)가 임베딩으로 유사 영상을 찾는다. 이어 코스모스3-슈퍼-이미지투비디오(Cosmos3-Super-Image2Video)가 배치와 움직임을 유지하면서 비·눈·안개 장면으로 바꾸고, 코스모스 이밸류에이터(Cosmos Evaluator)가 물리적 개연성을 검사한다.

다만 ‘두 개의 프롬프트’는 환경 구축과 블루프린트 실행을 지시하는 사용자 인터페이스를 뜻한다. 실제 내부에서는 저장소 복제, 요구 사항 점검, 서비스 배포, 검색·생성·평가가 연쇄적으로 수행된다. 엔비디아가 소개한 것은 자사 기술 블로그의 워크플로이며, 생성 데이터의 정확도나 실제 학습 성능을 보여 주는 비교 수치는 자료에 제시되지 않았다.

Footnotes

  1. NVIDIA Technical Blog, 「Build Training-Ready Physical AI Datasets with Two Prompts in NVIDIA Cosmos」 ↩

읽기 목록은 이 브라우저에 저장됩니다.

출처

  1. Build Training-Ready Physical AI Datasets with Two Prompts in NVIDIA Cosmos | NVIDIA Technical Blog — NVIDIA Technical Blog

이 글은 위 출처를 근거로 자동 생성된 뒤 발행됐습니다. 원문을 함께 확인해 주세요. 교차 보도 없이 단독 출처로 작성됐습니다.