Google erweitert KI-Assistenten Gemini Live: Neue Funktionen, Magic Cue und Echtzeit-Übersetzungen

Google perfektioniert seinen KI-Assistenten Gemini Live mit einem umfangreichen Update, das den Alltag deutlich erleichtern soll. Neben neuen visuellen Unterstützungsfunktionen über die Kamera verbessert das Unternehmen die Integration in wichtige Apps, die Sprachqualität und erweitert den intelligenten Suchmodus.

Objekterkennung via Kamera

Ab sofort kann Gemini Live Objekte im Kamerabild erkennen und relevante Informationen zu ihnen anzeigen. Diese Funktion ist praktisch beim Vergleichen von Produkten oder beim Finden des passenden Werkzeugs. Den Start macht die Funktion mit der Pixel-10-Reihe ab dem 28. August, weitere Android-Modelle folgen kurze Zeit später. iPhone-Nutzer müssen noch etwas warten.

Vertiefte Verknüpfung mit Google-Apps

Gemini Live vernetzt sich zunehmend mit Anwendungen wie Kalender, Notizen und Aufgaben. Zudem kommen bald Nachrichten, Telefon und Uhr hinzu. Auch in Google Maps sind neue Schnittstellen geplant, die direktes Versenden von Nachrichten oder Anrufe während der Navigation ermöglichen.

Natürlichere Stimme und personalisierte Optionen

Das aufgefrischte Sprachmodell sorgt für fließendere und realistischere Unterhaltungen. Nutzer können nun Tempo und Akzente anpassen oder Gemini verschiedene Rollen für Storytelling zuweisen. Diese Funktionen werden in den kommenden Wochen weltweit, auch in Deutschland, ausgerollt.

Verbesserter KI-Modus in der Google-Suche

Ein Kern-Update betrifft den intelligenten Suchmodus. Neu ist die Möglichkeit zur Echtzeit-Reservierung in Restaurants, wobei Datum, Zeit, Anzahl der Personen und Wunschküche berücksichtigt werden. Dies basiert auf Project Mariner, das Live-Browsing mit Partnerportalen wie OpenTable, Resy, Tock und Ticketmaster sowie dem Knowledge Graph kombiniert.

In den USA steht zudem ein personalisiertes Empfehlungs-Scouting zur Verfügung, das Nutzerdaten auswählbar für individuelle Vorschläge nutzt. Neu ist auch eine Sharing-Option, mit der Suchergebnisse geteilt und von anderen interaktiv weiterentwickelt werden können. Der Rollout erfolgt in über 180 Ländern, zunächst auf Englisch.

Magic Cue: Intelligente Infoboxen zum richtigen Zeitpunkt

Mit den neuen Pixel-10-Geräten kommt Magic Cue zum Einsatz. Die Funktion blendet automatisch relevante Informationen ein, exakt dann, wenn sie gebraucht werden. Bei einem Anruf bei einer Fluggesellschaft zeigt das System zum Beispiel die Buchungsnummer an. In Chats schlägt es passende Adressen und weitere Daten vor. Magic Cue läuft vorerst exklusiv auf Pixel-10-Geräten und ist wahrscheinlich an den Tensor G5-Prozessor gekoppelt.

Daily Hub als persönlicher Informationsassistent

Google integriert zudem den Daily Hub, der an ein modernes Google Now erinnert und auf Basis persönlicher Vorlieben täglich aktuelle Vorschläge liefert.

Voice Translate: Echtzeit-Übersetzungen bei Telefonaten

Exklusiv für die Pixel-10-Serie ist die Funktion Voice Translate. Sie übersetzt Gespräche in Echtzeit, sodass das Gegenüber die eigene Stimme in der gewünschten Sprache hört. Unterstützt werden Sprachen wie Deutsch, Französisch, Spanisch, Italienisch, Japanisch und Russisch. Das System arbeitet lokal auf dem Gerät, ohne Sprachdaten zu speichern.

Während des Gesprächs zeigt das Display eine Live-Transkription an. Die ersten Sekunden hört man die Originalstimme, danach folgt die Übersetzung inklusive Akzentanpassung.

Neue Telefon-Features: Take a Message & Call Notes

Mit Take a Message beantwortet Gemini verpasste Anrufe automatisch und erstellt Transkriptionen in Echtzeit, so wissen Nutzer sofort, ob ein Rückruf notwendig ist. Zudem können direkt aus Gesprächen Kalendereinträge oder Erinnerungen generiert werden.

Links mit einem * sind Partner-Links. Durch einen Klick darauf gelangt ihr direkt zum Anbieter. Solltet ihr euch dort für einen Kauf entscheiden, erhalte ich eine kleine Provision. Für euch ändert sich am Preis nichts. Danke für eure Unterstützung!