웨이모, 로보택시 AI 어시스턴트로 제미나이 테스트중

구글 출신 자율주행차 개발 기업 웨이모(Waymo)가 자사의 로보택시에 구글 AI 어시스턴트인 제미나이(Gemini)를 탑재하기 위한 테스트를 실시하고 있는 것으로 밝혀졌다.

기술 블로거인 제인 만춘 웡(Jane Manchun Wong) 조사를 통해 웨이모가 차량용 AI 어시스턴트로 제미나이를 테스트하고 있다는 사실이 밝혀진 것. 그는 웨이모 모바일 앱 코드를 조사하던 중 미발표 제미나이 통합을 위한 시스템 프롬프트를 발견했다고 설명했다.

또 앱 내에 문서(Waymo Ride Assistant Meta-Prompt)는 1200행이 넘는 사양서로 웨이모차량 내에서 AI 어시스턴트가 어떻게 작동할 것으로 예상되는지 구체적으로 정의하고 있다고 한다.

이 기능은 웨이모 앱 퍼블릭 빌드에는 탑재되지 않았지만 시스템 프롬프트를 보면 이게 단순한 챗봇 이상 것이라는 걸 알 수 있다는 지적이다. 웡에 따르면 차량용 제미나이는 승객 질문에 답변하는 것 뿐 아니라 에어컨 등 차내 기능을 관리하거나 필요에 따라 승객을 안심시킬 수도 있다고 한다.

시스템 프롬프트에 따르면 차량용 제미나이는 명확하고 간단한 언어를 사용하면서 전문 용어를 피하고 응답은 1~3문장으로 간결하게 정리하도록 지시받고 있다. 이 외에도 승객이 차내 스크린에서 어시스턴트를 활성화하면 제미나이는 사전 승인된 일련의 인사말 중에서 승객명으로 개인화된 걸 선택할 수 있다. 또 시스템은 승객의 컨텍스트 데이터 그러니까 탑승 횟수 등에도 접근할 수 있게 된다.

제미나이는 차내 온도·조명·음악과 같은 기능에 접근해 조작할 수 있다. 하지만 음량 조절·경로 변경·시트 조절·창문 조작은 불가능하며 승객이 이런 조작을 요구해도 제미나이는 아직 할 수 없다 같은 문구로 응답하도록 되어 있는 것으로 보인다.

흥미로운 점은 차량용 AI 어시스턴트인 제미나이와 자율주행 기술인 웨이모 드라이버(Waymo Driver)가 명확히 구분되어 있다는 것이다. 예를 들어 승객이 도로가 어떻게 보이냐고 질문하면 제미나이는 웨이모 드라이버는 여러 센서를 조합하여 사용하고 있다 같이 웨이모 드라이버가 도로를 어떻게 인식하는지 답변하도록 되어 있다.

이 외에도 제미나이는 실시간 운전 행동이나 특정 운전 이벤트에 대해 추측·설명·확인·부정·코멘트를 피하도록 지시받고 있다. 예를 들어 승객이 웨이모가 뭔가에 충돌하는 영상을 봤다고 물어볼 경우 제미나이는 직접 답변하지 않고 질문을 회피하도록 지시받고 있다고 한다. 시스템 프롬프트에는 당신의 역할은 운전 시스템 성능 대변인이 되는 게 아니며 방어적이거나 사과하는 어조를 취해서는 안 된다고 적혀 있다.

제미나이는 날씨나 에펠탑 높이, 특정 매장의 폐점 시간과 같은 일반적인 질문에 답변할 수 있지만 음식 주문이나 예약, 긴급 상황 대응과 같은 현실 세계 행동은 허용되지 않는다.

회사 측 관계자는 세부 사항을 밝힐 수는 없지만 웨이모 탑승 경험을 편안하고 매끄러우며 편리하게 만들기 위해 우리 팀은 항상 기능 개선에 힘쓰고 있다면서 다만 보도된 기능 전부가 탑승 경험에 반영될지는 미정이라는 답변을 받았다.

한편 제미나이가 웨이모 기술에 통합되는 건 이번이 처음이 아니다. 웨이모에 따르면 제미나이 세계 지식을 활용해 복잡하고 희귀하며 위험도가 높은 시나리오를 자율주행차가 주행할 수 있도록 AI 훈련을 진행하고 있다고 한다. 관련 내용은 이곳에서 확인할 수 있다.