Googles Gemini Live erhält Echtzeit-Bildschirm- und Kameraanalyse durch Project Astra

Google hat mit der Einführung neuer Funktionen für Gemini Live begonnen, die von Project Astra unterstützt werden und eine Echtzeit-Bildschirm- und Kameraanalyse ermöglichen. Dadurch kann Gemini Live den Bildschirm Ihres Telefons anzeigen und sofortige Antworten basierend auf dem Inhalt geben. Ein Benutzer entdeckte eine Schaltfläche "Bildschirm live teilen" in der Gemini-Überlagerung auf einem Xiaomi-Gerät. Die Funktion gewährt auch Zugriff auf Echtzeit-Kamerafunktionen, sodass Gemini Live-Aufnahmen analysieren und kontextbezogene Antworten geben kann. Diese Funktionen sind Teil des Google One AI Premium-Plans für Gemini Advanced-Abonnenten auf Android, wobei Pixel- und Galaxy S25-Benutzer zu den ersten gehören, die sie erleben werden. Project Astra unter der Leitung von Demis Hassabis von Google Deepmind zielt darauf ab, einen multimodalen KI-Assistenten zu entwickeln, der Audio, Video, Bilder und Text in Echtzeit verarbeiten kann.