2018.12.04

엔비디아, AI로 대화형 3D 환경 구축하는 연구결과 발표

편집부 | CIO KR
실세계 영상으로 학습된 모델을 활용해 대화형으로 3D 합성 환경을 렌더링할 수 있도록 하는 인공지능(AI) 연구를 엔비디아가 발표했다. 엔비디아의 연구 조직인 엔비디아 리서치가 개발한 성과다. 

지금껏 3D 합성 환경을 실시간으로 렌더링하기 위해서는 신경망이 사용되곤 했다. 가상 세계의 모든 객체는 개별적으로 모델링 되어야 하는데, 이는 비용과 시간 소모가 많은 작업이다. 

반면, 엔비디아는 새로운 연구로 건물이나 나무, 차량과 같은 사물을 렌더링 하기 위해 실세계 영상에서 자동으로 학습된 모델을 사용한다고 설명했다. 

이 기술은 게임, 자동차, 건축, 로봇 또는 가상현실을 위한 가상 세계를 신속하게 구축할 수 있다. 예를 들어, 실제 위치에 기반해 대화형 장면을 생성해내거나, 사용자가 유명한 팝 스타처럼 춤을 추는 모습을 보여줄 수 있다.

엔비디아 응용 딥 러닝 연구소 브라이언 카탄자로 부사장은 “엔비디아는 25년간 대화형 그래픽을 생성하는 새로운 방법을 고안해 왔으나, 신경망을 활용한 건 이번이 처음”이라며, “신경망, 즉 생성적 모델로 개발자들은 기존에 들이던 비용의 일부로 새로운 장면을 만들어 낼 수 있다”고 말했다.



이번 연구의 결과로 참가자들이 도시 장면을 탐색할 수 있도록 하는 간단한 운전 게임이 탄생했다. 모든 콘텐츠는 기존의 그래픽 엔진에서 생성된 3D 세계의 스케치를 영상으로 변환하는 신경망을 사용해 대화형으로 렌더링된다. 대화형 데모는 캐나다 몬트리얼에서 열리는 Neurl2018 컨퍼런스에서 시연될 예정이다.

생성적 신경망은 조명과 재질, 역동성을 비롯한 실제 세계의 모습을 모델링하는 방법을 학습했다. 장면이 완전히 합성되어 생성되기 때문에, 객체를 쉽게 제거하고 수정하거나 추가할 수 있다.

엔비디아 연구진의 논문에 따르면, 우리의 시각적 세계의 역동성을 모델링하고 재현하는 기능은 지능형 에이전트를 구축하는데 필수적이다. 순수한 과학적 관심 외에도, 시각적 경험을 합성하는 것을 배우는 것은 비전, 로봇공학, 컴퓨터 그래픽 등 다양한 분야에서 광범위한 응용사례를 갖는다. ciokr@idg.co.kr



2018.12.04

엔비디아, AI로 대화형 3D 환경 구축하는 연구결과 발표

편집부 | CIO KR
실세계 영상으로 학습된 모델을 활용해 대화형으로 3D 합성 환경을 렌더링할 수 있도록 하는 인공지능(AI) 연구를 엔비디아가 발표했다. 엔비디아의 연구 조직인 엔비디아 리서치가 개발한 성과다. 

지금껏 3D 합성 환경을 실시간으로 렌더링하기 위해서는 신경망이 사용되곤 했다. 가상 세계의 모든 객체는 개별적으로 모델링 되어야 하는데, 이는 비용과 시간 소모가 많은 작업이다. 

반면, 엔비디아는 새로운 연구로 건물이나 나무, 차량과 같은 사물을 렌더링 하기 위해 실세계 영상에서 자동으로 학습된 모델을 사용한다고 설명했다. 

이 기술은 게임, 자동차, 건축, 로봇 또는 가상현실을 위한 가상 세계를 신속하게 구축할 수 있다. 예를 들어, 실제 위치에 기반해 대화형 장면을 생성해내거나, 사용자가 유명한 팝 스타처럼 춤을 추는 모습을 보여줄 수 있다.

엔비디아 응용 딥 러닝 연구소 브라이언 카탄자로 부사장은 “엔비디아는 25년간 대화형 그래픽을 생성하는 새로운 방법을 고안해 왔으나, 신경망을 활용한 건 이번이 처음”이라며, “신경망, 즉 생성적 모델로 개발자들은 기존에 들이던 비용의 일부로 새로운 장면을 만들어 낼 수 있다”고 말했다.



이번 연구의 결과로 참가자들이 도시 장면을 탐색할 수 있도록 하는 간단한 운전 게임이 탄생했다. 모든 콘텐츠는 기존의 그래픽 엔진에서 생성된 3D 세계의 스케치를 영상으로 변환하는 신경망을 사용해 대화형으로 렌더링된다. 대화형 데모는 캐나다 몬트리얼에서 열리는 Neurl2018 컨퍼런스에서 시연될 예정이다.

생성적 신경망은 조명과 재질, 역동성을 비롯한 실제 세계의 모습을 모델링하는 방법을 학습했다. 장면이 완전히 합성되어 생성되기 때문에, 객체를 쉽게 제거하고 수정하거나 추가할 수 있다.

엔비디아 연구진의 논문에 따르면, 우리의 시각적 세계의 역동성을 모델링하고 재현하는 기능은 지능형 에이전트를 구축하는데 필수적이다. 순수한 과학적 관심 외에도, 시각적 경험을 합성하는 것을 배우는 것은 비전, 로봇공학, 컴퓨터 그래픽 등 다양한 분야에서 광범위한 응용사례를 갖는다. ciokr@idg.co.kr

X