Во вторник на Google I/O 2025 компания Google объявила о том, что Project Astra - мультимодальный искусственный интеллект с низкой задержкой - станет основой для целого ряда новых возможностей в Поиске, приложении Gemini AI и продуктах сторонних разработчиков. В частности, Project Astra используется для новой функции Search Live в Google Search.
При использовании AI Mode, поисковой функции Google с поддержкой ИИ, или Lens, функции визуального поиска компании, пользователи могут нажать кнопку «Live», чтобы задать вопросы о том, что они видят через камеру смартфона. Project Astra передает видео и аудио в реальном времени в модель искусственного интеллекта и отвечает на вопросы пользователей практически без задержек.
Впервые представленный на Google I/O 2024 в виде вирусной демонстрации смарт-очков, проект «Астра» был создан Google DeepMind как способ продемонстрировать возможности мультимодального ИИ практически в режиме реального времени. Сейчас Google заявляет, что создает очки Project Astra вместе с партнерами, включая Samsung и Warby Parker, но компания пока не называет дату запуска. Зато у компании есть целый ряд функций Project Astra для потребителей и разработчиков. По словам Google, Project Astra обеспечивает работу новой функции в Live API - конечной точки для разработчиков, которая позволяет осуществлять голосовое взаимодействие с Gemini с низкой задержкой.
Начиная со вторника, разработчики могут создавать приложения, поддерживающие аудио- и визуальный ввод, а также нативный аудиовыход - как в Project Astra. По словам Google, в обновленном Live API также улучшено распознавание эмоций, что означает, что модель искусственного интеллекта будет реагировать более адекватно, и включены мыслительные возможности моделей искусственного интеллекта Gemini. В приложении Gemini Google сообщает, что возможности Project Astra по обмену видео и экранами в режиме реального времени будут доступны всем пользователям.
Хотя Project Astra уже позволяет вести беседы в Gemini Live с низкой задержкой, ранее этот визуальный интерфейс был доступен только платным подписчикам. Google уверена, что Project Astra - это будущее для многих ее продуктов, и даже может стать основой для совершенно новой категории продуктов: умных очков. Хотя это может быть правдой, Google до сих пор не назначила дату запуска смарт-очков Project Astra, которые она продемонстрировала в прошлом году. Компания предложила еще несколько подробностей о том, как будут выглядеть эти смарт-очки, но они все еще далеки от реальности.
Оригинал
Уникальность