즉시 번역? 제미나이 3.5 라이브 트랜슬레이트 발표했다

구글은 6월 9일 음성 번역 모델인 제미나이 3.5 라이브 트랜슬레이트(Gemini 3.5 Live Translate)를 발표했다. 한국어를 포함한 70개 이상 언어를 지원하며 화자 억양과 말하는 속도, 음높이를 유지하면서 거의 실시간으로 음성을 다른 언어로 번역하는 모델이다.

제미나이 3.5 라이브 트랜슬레이트는 발화가 끝나기를 기다린 후 번역하는 기존 방식이 아니라 음성 스트림을 지속적으로 처리하는 모델. 문맥을 고려해 번역하기 위해 발화로부터 몇 초 정도 지연된 번역 음성을 생성하는 게 특징이며 70개 이상 언어를 자동 감지하고 화자 억양, 사이, 음높이를 유지한 자연스러운 음성을 생성할 수 있다.

제미나이 3.5 라이브 트랜슬레이트는 개발자를 대상으로 제미나이 라이브 API(Gemini Live API)와 구글 AI 스튜디오를 통해 퍼블릭 프리뷰로 제공된다. 다국어 입력을 별도 설정 없이 처리할 수 있으며 시끄럽고 예측하기 어려운 환경에도 대응할 수 있는 노이즈 내성을 갖추고 있다.

구글은 제미나이 라이브 API를 활용하면 개발자가 다국어 통화, 회의, 수업, 스트리밍 등에서 라이브 통역 기능을 구축할 수 있다고 강조했다. 이미 아고라(Agora), 피쉬잼(Fishjam), 라이브킷(LiveKit), 핍캣(Pipecat), 비전 에이전츠(Vision Agents) 등 개발자 플랫폼에서 제미나이 라이브 API가 실시간 미디어 전송 기반을 담당하고 있다고 한다.

차량 호출 서비스를 제공하는 그랩(Grab)은 탑승 시 운전자와 이용자 간 다국어 소통에 제미나이 3.5 라이브 트랜슬레이트를 시범 적용하고 있다. 그랩 사용자는 자사 서비스를 통해 매월 1,000만 건 이상 음성 통화를 하고 있다. 그랩 최고제품책임자인 필립 칸달(Philipp Kandal)은 다국어 자동 감지와 낮은 지연 시간의 정확한 음성 번역을 높이 평가했다.

또 화상회의 도구인 구글 미트(Google Meet)에도 제미나이 3.5 라이브 트랜슬레이트를 활용한 음성 번역이 도입될 예정. 지원 언어는 기존 5개 언어에서 70개 이상으로 확대되며 영어와의 상호 번역으로 한정되어 있던 상태에서 벗어나 한 회의에서 2,000개 이상 언어 조합을 지원할 수 있게 된다. 구글 미트용 기능은 6월부터 일부 법인용 구글 워크스페이스 사용자를 대상으로 프라이빗 프리뷰로 시작되며 이후 하반기부터 광범위한 전개가 예정되어 있다.

구글 번역 앱에서는 안드로이드와 iOS 양쪽 모두에 제미나이 3.5 라이브 트랜슬레이트가 탑재된다. 라이브 번역 기능에서 임의 헤드폰을 연결하면 70개 이상 언어로 화자 어조를 반영한 번역을 이용할 수 있다고 한다. 또 안드로이드용으로는 새로운 리스닝 모드(Listening Mode)도 도입된다. 이를 통해 헤드폰이 없는 경우에도 일반 통화처럼 스마트폰을 귀에 대는 것만으로 번역된 음성을 수화구를 통해 직접 들을 수 있다.

한편 제미나이 3.5 라이브 트랜슬레이트로 생성되는 모든 음성에는 신스ID(SynthID)에 의한 워터마크가 포함된다. 구글은 이는 음성 출력에 직접 삽입되는 보이지 않는 워터마크로 AI 생성 콘텐츠를 식별 가능하게 해 잘못된 정보 확산을 방지하는 데 도움을 주기 위한 것이라고 설명했다.

제미나이 3.5 라이브 트랜슬레이트는 6월 9일부터 순차 적용되며 개발자 대상으로는 제미나이 라이브 API와 구글 AI 스튜디오에서 퍼블릭 프리뷰로, 기업 대상으로는 구글 미트에서 일부 구글 워크스페이스 고객을 대상으로 같은 달부터 프라이빗 프리뷰로 일반 사용자 대상으로는 구글 번역 앱 안드로이드 및 iOS 버전을 통해 전 세계에 제공된다. 관련 내용은 이곳에서 확인할 수 있다.