Google Gemini Live отримує аналіз екрана та камери в реальному часі за допомогою Project Astra

Google почав розгортання нових функцій для Gemini Live, що працюють на основі Project Astra, які дозволяють аналізувати екран і камеру в реальному часі. Це дозволяє Gemini Live переглядати екран вашого телефону та надавати миттєві відповіді на основі контенту. Користувач виявив кнопку «Поділитися екраном у реальному часі» в оверлеї Gemini на пристрої Xiaomi. Ця функція також надає доступ до можливостей камери в реальному часі, дозволяючи Gemini аналізувати пряму трансляцію та надавати контекстні відповіді. Ці функції є частиною плану Google One AI Premium для підписників Gemini Advanced на Android, причому користувачі Pixel і Galaxy S25 одними з перших зможуть їх випробувати. Project Astra, очолюваний Демісом Хассабісом із Google Deepmind, спрямований на створення мультимодального ШІ-помічника, здатного обробляти аудіо, відео, зображення та текст у реальному часі.