웨이모, 자율주행 시뮬레이션 생성 AI 모델 발표

구글 산하 자율주행차 개발 기업인 웨이모가 초현실적 시뮬레이션 환경을 구축해 자율주행 모델을 훈련할 수 있는 AI 모델 웨이모 월드 모델(Waymo World Model)을 발표했다.

웨이모 월드 모델은 텍스트를 입력하는 것만으로 내부를 돌아다닐 수 있는 3D 환경을 구축하는 구글 딥마인드 AI 모델인 지니3(Genie 3)를 기반으로 구축된 모델이다. 구글이 프로젝트 지니(Project Genie)로 이 기술에 대한 접근을 확대했을 때는 게임 회사 주가가 하락할 정도로 주목을 받았다.

웨이모는 이런 지니3를 기반으로 웨이모 월드 모델을 구축해 현실 세계에서는 상정할 수 없는 희귀한 상황을 시뮬레이션해 자율주행 모델을 훈련한다. 자율주행 업계 시뮬레이션 모델 대부분은 수집한 도로 데이터만을 기반으로 처음부터 학습된다. 이 접근법에서는 시스템이 제한된 경험으로부터만 학습할 수 있다. 지니3는 다양한 대규모 비디오 세트를 통한 사전 학습으로 얻어진 강력한 세계 지식을 갖추고 있다. 이를 통해 차량이 직접 관찰한 적이 없는 상황을 탐색하는 게 가능해진다는 설명이다.

예를 들어 전방에 토네이도가 출현하면 웨이모 월드 모델은 전문적인 사후 학습을 통해 2D 영상에서 얻어지는 방대한 정보를 3D 정보로 변환하고 깊이 등을 파악해 훈련한다. 무모한 운전으로 앞차가 도로 옆으로 돌진하는 장면이나 전방에 코끼리가 가로막고 있는 장면, 공룡으로 분장한 보행자와 조우하는 장면 등 현실 세계에서는 좀처럼 일어날 수 없는 희귀한 장면도 상정해 훈련할 수 있다.