엔비디아가 오늘 미국 콜로라도 덴버에서 열린 시그라프(SIGGRAPH) 2024에서 실제 세계의 AI 레디(AI-ready) 가상 모델(virtual representation)을 생성하기 위한 새로운 딥 러닝 프레임워크인 fVDB를 발표했습니다.

fVDB는 물, 불, 연기, 구름과 같은 희소한 볼류메트릭 데이터(volumetric data)를 시뮬레이션하고 렌더링하기 위한 업계 표준 라이브러리인 오픈VDB(OpenVDB)를 기반으로 구축됐습니다.

현실 세계에 존재하는 자율주행 차량이나 로봇과 같은 물리 생성형 AI는 3D 공간을 이해하고 그 안에서 작동할 수 있는 능력인 공간지능(spatial intelligence)을 갖춰야 합니다. 우리 주변을 둘러싼 세계의 초미세한 대규모 디테일을 포착하는 것은 필수적입니다. 하지만 현실을 가상의 표현으로 변환해 AI를 훈련시키는 것은 어려운 일입니다.

실제 환경에 대한 원시 데이터는 신경방사장(Neural Radiance Fields, NeRF), 라이다(lidar)와 같은 다양한 기술을 통해 수집할 수 있습니다. fVDB는 이 데이터를 실시간 렌더링되는 대규모 AI 레디 환경으로 변환합니다.