Google представила ИИ-помощника, который понимает, что происходит вокруг

На конференции Google I/O представили нового ИИ-ассистента, который считывает окружающую обстановку и буквально понимает, что происходит. Пока существует лишь ранняя версия решения под названием Project Astra, но ему уже прочат успех и признание. Это универсальный помощник, который всегда с вами и может выполнять самые разные задачи, говорят разработчики.

Способности ассистента продемонстрировали в видеоролике: сотрудника офиса Google активировала помощника на смартфоне и через камеру начала показывать ему окружающую обстановку. Девушка попросила ИИ подавать сигнал, если он увидит предметы, которые могут издавать звуки. ИИ подал сигнал, когда в кадр попала стоящая на столе колонка.

Дальше ИИ показали цветные мелки и спросили, для чего они. Project Astra ответил, что ими можно рисовать красочные творения. Еще ассистенту показали программный код на мониторе и спросили, за что отвечает конкретная часть кода — ИИ верно ответил и на этот вопрос. Наконец, помощника попросили определить местоположение, показав вид из окна офиса — его ответ был точным. Всё это происходило в режиме реального времени.

Алгоритм работает на базе большой языковой модели Gemini 1.5 Pro — самой мощной нейросети Google. Когда он будет доступен пользователям, пока не сообщается.

Ранее ITinfo сообщало о том, что Google подключит Gemini к своей почте Gmail.