Google bringt Echtzeit-Visuelle Unterstützung für blinde Nutzer auf Android

Google hat am 1. Oktober 2026 Guided Vision in Gemini Live eingeführt, ein Echtzeit‑, sprachgesteuertes visuelles Hilfsfeature, das für Menschen entwickelt wurde, die blind sind, eine Sehbehinderung haben oder intuitive visuelle Unterstützung wünschen. Es ist jetzt auf Android‑Geräten mit Android 9 und höher in Regionen und Sprachen verfügbar, in denen Gemini Live unterstützt wird.

Google hat das Feature erstmals am 1. September 2026 in seinem September Android Drop vorgestellt, wo Guided Vision als demnächst für Telefone mit Android 9 und höher in Ländern, in denen Gemini verfügbar ist, angekündigt wurde. Diese Vorschau beschrieb dieselben kameragestützten Beschreibungen und Sprachrückmeldungen zum Neuausrichten und enthielt einen Hinweis, dass das Feature Fehler machen kann und weder als Medizinprodukt, Mobilitätshilfe oder Ersatz für sichere Reiseleitfäden gedacht ist, noch für Navigation oder Hinderniserkennung verwendet werden sollte.

Wie Guided Vision funktioniert

Während einer Gemini‑Live‑Sitzung teilt der Nutzer die Kamera des Telefons, und Gemini liefert gesprochene Beschreibungen der Umgebung, beantwortet detaillierte Anschlussfragen und gibt proaktive verbale Hinweise, um das gewünschte Objekt in den Fokus zu rücken. Zeigt die Kamera zu hoch, zu nah oder leicht seitlich, reagiert Gemini mit natürlichen verbalen Aufforderungen zum Neuausrichten – zum Beispiel den Nutzer, langsam nach rechts zu schwenken, nach unten zu neigen oder zurückzutreten, bis ein klarer visueller Kontext vorhanden ist, den es zur Beantwortung benötigt.

Die Ankündigung, verfasst von Isha Sheth, Senior Product Manager für Gemini Live, beschreibt Guided Vision als Umwandlung von Gemini in einen konversationalen visuellen Partner, der sich mit minimalem Aufwand in den Alltag integriert.

Entwickelt mit Aira und der Barrierefreiheits‑Community

Google erklärte, dass Guided Vision durch enge Zusammenarbeit mit der Barrierefreiheits‑Community entwickelt wurde. Um Gemini Live für konversationelle, reale Kontexte zu trainieren, ging das Unternehmen eine Partnerschaft mit Aira ein, um visuell Daten für insgesamt zehntausende Stunden zu interpretieren. Mehr als 1.000 Mitglieder von Airas Trusted‑Tester‑Netzwerk halfen, das Modell im Alltag zu belasten und zu verfeinern, und Aira‑Spezialisten arbeiteten direkt mit Google‑Teams als Fachexperten zusammen, um Sicherheitsrichtlinien zu etablieren und zu evaluieren.

Sally Khoo, stellvertretende Direktorin (Innovation) bei SG Enable, sagte in der Ankündigung: „Da Standard‑Smartphones in der Regel für sehende Nutzer entwickelt werden, die den Bildschirm sehen können, kann ein Produkt wie die Echtzeit‑Visuellen Beschreibungen von Gemini Live mit proaktiver verbaler Kameraführung eine kritische Lücke bei alltäglichen Aufgaben zu Hause schließen, vom Lesen von Kleingedrucktem bis zum Auffinden täglicher Dinge.“

Laut Google spiegelt das Feature umfangreiche Tests und Rückmeldungen von Blind‑ und Sehbehinderten‑Gemeinschaften in Indien, Brasilien, Singapur, Indonesien, Japan und weiteren Ländern wider, die gesammelt wurden, um Beschreibungen, Neuausrichtungs‑Hinweise und Antworten natürlich und hilfreich wirken zu lassen.

Prashant Verma von der National Association of the Blind, Indien, sagte in derselben Ankündigung: „Das Testen dieser Fähigkeiten direkt mit blinden und sehbehinderten Nutzer*innen in den indischen Sprachen stellt sicher, dass diese Technologie verlässliche, praktische Unterstützung im Alltag bietet.“

Dokumentierte Anwendungsfälle im Alltag

Google beschrieb alltägliche Aufgaben, bei denen eine schnelle visuelle Überprüfung besonders wichtig ist. Zum Lesen von Kleingedrucktem und komplexen Texten nannte das Unternehmen kleine Nährwertangaben auf Lebensmittelverpackungen, Bedienelemente von Geräten und Waschmaschinenprogramme sowie gedruckte Speisekarten in schwach beleuchteten Restaurants. Zum Auffinden und Lokalisieren von Gegenständen gab es Beispiele wie einen heruntergefallenen Ohrhörer auf dem Boden und den schwarzen Pfeffer in einem überfüllten Gewürzschrank. Zum Beschreiben von Objekten und Abgleichen von Details können Nutzer nach Farben, Mustern und Formen fragen, etwa ob ein gestreiftes Hemd zu einer Hose passt oder die Farbe einer bestimmten Jacke zu bestimmen. Zum Erkunden der unmittelbaren Umgebung liefert Guided Vision beschreibende Übersichten über unbekannte Räume, Raumaufteilungen oder über einen Tisch verteilte Gegenstände.

Google erklärte, dass Guided Vision Gespräche in mehreren Sprachen unterstützt und dass es, wie viele Barrierefreiheits‑Innovationen, auch praktische visuelle Unterstützung für ältere Menschen, Personen mit geringer Lesefähigkeit oder alle, die versuchen, Kleingedrucktes bei schwacher Beleuchtung zu lesen, bietet.

Zugriffspfade, Verfügbarkeit und genannte Einschränkungen

Nutzer können auf das Feature über die Gemini‑App, eine Android‑Barrierefreiheits‑Verknüpfung oder Google TalkBack zugreifen. In der Gemini‑Mobile‑App öffnen die Nutzer die Profileinstellungen und aktivieren “Use Guided Vision in Live”, dann öffnen sie Gemini Live und tippen, um die Kamera zu teilen. Unter Android‑Einstellungen → Barrierefreiheit → Visuelle Unterstützung können Nutzer eine Barrierefreiheits‑Verknüpfung einrichten, um Guided Vision über die schwebende Barrierefreiheits‑Schaltfläche, eine Zwei‑Finger‑Wischgeste oder durch gleichzeitiges Drücken beider Lautstärketasten zu starten. Nutzer, die Google TalkBack verwenden, können das TalkBack‑Menü mit einem Drei‑Finger‑Tap öffnen und Guided Vision direkt auswählen.

Google gibt an, dass Guided Vision ein Hilfswerkzeug ist und Fehler machen kann. Das Feature ist kein Medizinprodukt, keine Mobilitätshilfe und kein Ersatz für den weißen Stock und ist weder für Navigation, sichere Reiseleitung noch für Hinderniserkennung gedacht. Nutzer sollten weiterhin etablierte Mobilitätshilfen und sichere Reisetechniken in der physischen Umgebung verwenden.

Um loszulegen, empfiehlt Google, die Gemini‑App und die Android‑Systemsoftware auf die neuesten Versionen zu aktualisieren.