Google introducerar realtidsvisuell assistans för blinda användare på Android

Google lanserade Guided Vision i Gemini Live den 1 oktober 2026, en realtids‑, röststyrd visuell assistansfunktion som är utvecklad för personer som är blinda, har nedsatt syn eller vill ha intuitiv visuell assistans. Den är nu tillgänglig på Android‑enheter med Android 9 och senare i de regioner och språk där Gemini Live stöds.

Google presenterade först funktionen den 1 september 2026 i sin September Android Drop, där Guided Vision angavs som kommande till telefoner med Android 9 och senare i länder där Gemini är tillgängligt. Den förhandsvisningen beskrev samma kameradelningsbeskrivningar och röståterkoppling för omramning, och innehöll en fotnot som varnade för att funktionen kan göra fel och inte är avsedd som en medicinsk enhet, mobilitetshjälpmedel eller ersättning för säkra reseguider, inte heller för navigation eller hinderdetektering.

Hur Guided Vision fungerar

Under en Gemini Live‑session delar användaren telefonens kamera och Gemini levererar talade beskrivningar av omgivningen, svarar på detaljerade följdfrågor och ger proaktiva verbala signaler för att centrera det som användaren vill utforska. Om kameran är riktad för högt, för nära eller något åt sidan svarar Gemini med naturliga verbala uppmaningar att omramma — och ber användaren panorera långsamt åt höger, luta neråt eller ta ett steg bakåt tills den har den tydliga visuella kontexten som behövs för att svara.

Meddelandet, skrivet av Isha Sheth, Senior Product Manager för Gemini Live, beskriver Guided Vision som att göra Gemini till en konverserande visuell partner som passar in i dagliga rutiner med minimal friktion.

Utvecklad med Aira och tillgänglighetsgemenskapen

Google uppgav att Guided Vision utvecklades genom nära samarbete med tillgänglighetsgemenskapen. För att träna Gemini Live för konverserande, verklig kontext samarbetade företaget med Aira för att visuellt tolka data under totalt tiotusenvis av timmar. Mer än 1 000 medlemmar i Airas Trusted Tester‑nätverk hjälpte till att stresstesta och förfina modellen över dagliga rutiner, och Aira‑specialister arbetade direkt med Googles team som ämnesexperter för att fastställa och utvärdera säkerhetsgränser.

Sally Khoo, Deputy Director (Innovation) på SG Enable, sade i meddelandet: “Eftersom standardtelefoner vanligtvis är byggda för seende användare som kan se skärmen, kan en produkt som Gemini Live’s realtidsbeskrivningar med proaktiv verbal kameravägledning hjälpa till att överbrygga ett kritiskt gap i vardagliga uppgifter hemma, från att läsa liten text till att lokalisera dagliga nödvändigheter.”

Enligt Google speglar funktionen omfattande tester och återkoppling från blinda och nedsatta syn‑gemenskaper i Indien, Brasilien, Singapore, Indonesien, Japan och fler, insamlade för att göra beskrivningar, omramningssignaler och svar naturliga och hjälpsamma.

Prashant Verma från National Association of the Blind, India, sade i samma meddelande: “Att testa dessa funktioner direkt med blinda och nedsatta syn‑användare på indiska språk säkerställer att denna teknik levererar pålitlig, praktisk assistans i vardagen.”

Dokumenterade vardagliga användningsfall

Google beskrev vardagliga uppgifter där snabb visuell verifiering är viktigast. För att läsa liten text och komplex text listade företaget små näringsetiketter på livsmedelsförpackningar, apparatknappar och tvättmaskinsprogram, samt tryckta menyer i svagt upplysta restauranger. För att hitta och lokalisera föremål gav de exempel på ett nedfallet hörlur på golvet och svartpeppar i ett trångt kryddskåp. För att beskriva föremål och matcha detaljer kan användare fråga om färger, mönster och former, till exempel kontrollera om en randig skjorta matchar ett par byxor eller identifiera färgen på en specifik jacka. För att utforska den omedelbara omgivningen ger Guided Vision beskrivande översikter av okända utrymmen, rumsplaner eller föremål placerade över ett bord.

Google uppgav att Guided Vision stödjer konversationer på flera språk och att, precis som många tillgänglighetsinnovationer, den också ger praktisk visuell assistans för äldre, personer med låg läskunnighet eller någon som försöker läsa liten text i svagt ljus.

Tillgångssätt, tillgänglighet och angivna begränsningar

Användare kan komma åt funktionen via Gemini‑appen, ett Android‑tillgänglighetskortkommando eller Google TalkBack. I Gemini‑mobilappen öppnar användarna profilinställningarna och slår på “Use Guided Vision in Live”, öppnar sedan Gemini Live och trycker för att dela kameran. Under Android‑inställningar, i Tillgänglighet och sedan Synhjälp, kan användarna konfigurera ett tillgänglighetskortkommando för att starta Guided Vision med den flytande tillgänglighetsknappen, en två‑finger‑svepgest eller genom att trycka på båda volymknapparna. Användare som kör Google TalkBack kan öppna TalkBack‑menyn med ett tre‑finger‑tryck och välja Guided Vision direkt.

Google anger att Guided Vision är ett assistansverktyg och kan göra fel. Funktionen är inte en medicinsk enhet, ett mobilitetshjälpmedel eller ersättning för en vit käpp, och den är inte avsedd för navigation, säker resevägledning eller hinderdetektering. Användare bör fortsätta förlita sig på etablerade mobilitetshjälpmedel och säkra resevanor i fysiska miljöer.

För att komma igång rekommenderar Google att du uppdaterar Gemini‑appen och Android‑systemprogramvaran till de senaste versionerna.