Google führt heute die Funktion Guided Vision in Gemini Live für kompatible Android-Geräte ein. Diese neue, auf Künstlicher Intelligenz (KI) basierende Technologie liefert Echtzeit-Audiobeschreibungen dessen, worauf die Kamera des Smartphones gerichtet ist.
Funktionsweise und Zielgruppe
Die Guided Vision-Funktion wurde entwickelt, um Menschen mit Sehbehinderung, geringem Sehvermögen oder in spezifischen Situationen Unterstützung zu bieten. Ähnlich Apples VoiceOver Live Recognition für iPhone und Vision Pro, ermöglicht sie Nutzern, ihre Umgebung detaillierter wahrzunehmen.
Durch die Freigabe der Kamera in Gemini Live kann die Google-KI bei verschiedenen Aufgaben helfen. Dazu gehören:
- Das Lesen kleiner Texte.
- Die Beschreibung der unmittelbaren Umgebung.
- Das Auffinden oder Identifizieren von Objekten.
- Die Beschreibung spezifischer Details an Gegenständen.
Nutzer können zudem Folgefragen zu dem, was sie gerade betrachten, stellen. Beispielsweise ist es möglich, Gemini zu bitten, das Verfallsdatum eines Artikels vorzulesen, den die KI zuvor identifiziert hat. Sollte ein angefragtes Objekt nicht im Bildausschnitt sein, gibt Gemini akustische Hinweise, um die Kamera korrekt auszurichten.
Verfügbarkeit und Einschränkungen
Neben der Integration in Gemini Live ist Guided Vision auch in der Gemini-App und in Google TalkBack verfügbar. Nutzer können zudem eine Barrierefreiheitsverknüpfung in den Einstellungen ihres Geräts einrichten, sofern dieses mit Android 9 oder höher läuft. Die Funktion wurde kürzlich im Rahmen von Pixel-Updates angekündigt.
Google weist jedoch darauf hin, dass Guided Vision nicht für sicherheitskritische Anwendungen gedacht ist. Die Funktion sollte nicht für Navigation, sichere Reiseführung oder Hinderniserkennung eingesetzt werden und ersetzt keine Mobilitätshilfen wie einen Blindenstock.
Thema: Gemini. Quelle/Inspiration: The Verge.