Google раскрыла новую возможность для своего искусственного интеллекта-помощника Gemini, которая позволяет ему анализировать окружающую среду через камеру в автомобиле. Экспериментальную технологию продемонстрировали на электрическом кроссовере Volvo EX60, как сообщает портал ArenaEV. Во время демонстрации Gemini получил доступ к изображению с передней камеры и смог отвечать на вопросы о зданиях, достопримечательностях и других объектах, встречающихся в пути. Это первый случай, когда искусственный интеллект объединил языковую модель с системой визуального восприятия окружающей среды автомобиля. Презентацию провели высокопоставленные сотрудники компании Google - президент Android Самир Самат и руководитель Google AI Studio Логан Килпатрик на кампусе в Маунтин-Вью. В ходе тестовой поездки Gemini успешно распознал несколько объектов, включая арт-объект The Orb, солнечную крышу здания Gradient Canopy и концертную площадку Shoreline Amphitheatre, рассказав интересные факты о них. Google подчеркнула, что система не записывает видео постоянно. Камера активируется только после запроса водителя, а доступ к изображению прекращается сразу после ответа. Это сделано для обеспечения конфиденциальности пользователей. Технология находится на ранней стадии разработки. Во время демонстрации наблюдалась задержка при передаче данных на серверы, и интерфейс не отображает изображение с камеры на дисплее автомобиля, водитель получает лишь голосовой ответ. Google видит потенциал использования этой функции в поездках за границу. Например, водитель сможет запросить Gemini прочитать и перевести дорожный знак на незнакомом языке, не отвлекаясь на смартфон. Компания не раскрывает сроки появления функции в серийных автомобилях. Также неизвестно, получат ли другие модели с платформой Google Built-in подобную возможность.