Google porta assistenza visiva in tempo reale agli utenti non vedenti su Android

Google ha lanciato Guided Vision in Gemini Live il 1 ottobre 2026, una funzione di assistenza visiva in tempo reale, guidata dalla voce, progettata per persone non vedenti, ipovedenti o che desiderano un’assistenza visiva intuitiva. È ora disponibile sui dispositivi Android con Android 9 o versioni successive, nelle regioni e nelle lingue in cui Gemini Live è supportato.

Google ha presentato in anteprima la funzionalità per la prima volta il 1 settembre 2026, nel suo September Android Drop, dove Guided Vision era indicata come prossima uscita per i telefoni con Android 9 o versioni successive nei paesi in cui Gemini è disponibile. Tale anteprima descriveva le stesse descrizioni condivise dalla fotocamera e il feedback vocale per il riquadramento, e includeva una nota a piè di pagina che avvertiva che la funzione può commettere errori e non è destinata a essere un dispositivo medico, un ausilio alla mobilità o un sostituto delle guide di viaggio sicuro, né per la navigazione o il rilevamento di ostacoli.

Come funziona Guided Vision

Durante una sessione di Gemini Live, l’utente condivide la fotocamera del telefono e Gemini fornisce descrizioni vocali dell’ambiente circostante, risponde a domande di approfondimento dettagliate e offre indicazioni verbali proattive per mettere a fuoco ciò che l’utente desidera esplorare. Se la fotocamera è puntata troppo in alto, troppo vicino o leggermente di lato, Gemini risponde con suggerimenti verbali naturali per riquadrare — chiedendo all’utente di spostare lentamente verso destra, inclinare verso il basso o fare un passo indietro finché non ottiene il contesto visivo chiaro necessario per rispondere.

L’annuncio, redatto da Isha Sheth, Senior Product Manager per Gemini Live, descrive Guided Vision come una trasformazione di Gemini in un partner visivo conversazionale che si integra nelle routine quotidiane con minima frizione.

Sviluppato con Aira e la comunità dell’accessibilità

Google ha dichiarato che Guided Vision è stato sviluppato attraverso una stretta collaborazione con la comunità dell’accessibilità. Per addestrare Gemini Live a gestire contesti conversazionali e reali, l’azienda ha collaborato con Aira per interpretare visivamente i dati per un totale di decine di migliaia di ore. Oltre 1.000 membri della rete Trusted Tester di Aira hanno contribuito a testare sotto carico e perfezionare il modello nelle routine quotidiane, e gli specialisti di Aira hanno lavorato direttamente con i team di Google come esperti di settore per definire e valutare le salvaguardie di sicurezza.

Sally Khoo, Deputy Director (Innovation) presso SG Enable, ha dichiarato nell’annuncio: “Poiché i telefoni standard sono tipicamente progettati per utenti vedenti che possono vedere lo schermo, un prodotto come le descrizioni visive in tempo reale di Gemini Live con guida verbale proattiva della fotocamera può contribuire a colmare un divario critico nelle attività quotidiane a casa, dalla lettura di caratteri minuscoli alla localizzazione degli oggetti di uso quotidiano.”

Secondo Google, la funzionalità riflette test approfonditi e feedback provenienti dalle comunità di non vedenti e ipovedenti in India, Brasile, Singapore, Indonesia, Giappone e altri paesi, raccolti per rendere le descrizioni, le indicazioni di riquadramento e le risposte naturali e utili.

Prashant Verma della National Association of the Blind, India, ha affermato nello stesso annuncio: “Testare queste capacità direttamente con utenti non vedenti e ipovedenti in diverse lingue indiane garantisce che questa tecnologia fornisca assistenza affidabile e pratica nella vita quotidiana.”

Casi d’uso quotidiani documentati

Google ha descritto le attività quotidiane in cui la verifica visiva rapida è più importante. Per leggere caratteri minuscoli e testi complessi, l’azienda ha elencato piccole etichette nutrizionali su confezioni alimentari, quadranti di elettrodomestici e cicli di lavatrici, e menu stampati in ristoranti poco illuminati. Per trovare e localizzare oggetti, ha fornito esempi di un auricolare caduto sul pavimento e del pepe nero all’interno di un armadietto di spezie affollato. Per descrivere oggetti e confrontare dettagli, gli utenti possono chiedere informazioni su colori, motivi e forme, ad esempio verificare se una camicia a righe si abbina a un paio di pantaloni o identificare il colore di una giacca specifica. Per esplorare l’ambiente immediato, Guided Vision restituisce panorami descrittivi di spazi sconosciuti, disposizioni di stanze o oggetti posti su un tavolo.

Google ha affermato che Guided Vision supporta conversazioni in più lingue e che, come molte innovazioni di accessibilità, fornisce anche assistenza visiva pratica per adulti anziani, persone con bassa alfabetizzazione o chiunque cerchi di leggere caratteri minuscoli in condizioni di scarsa illuminazione.

Percorsi di accesso, disponibilità e limitazioni dichiarate

Gli utenti possono accedere alla funzionalità tramite l’app Gemini, un collegamento rapido di Accessibilità Android o Google TalkBack. Nell’app mobile Gemini, gli utenti aprono le impostazioni del profilo e attivano “Use Guided Vision in Live”, quindi aprono Gemini Live e toccano per condividere la fotocamera. Nelle Impostazioni Android, nella sezione Accessibilità e poi Assistenza visiva, gli utenti possono configurare un collegamento rapido di Accessibilità per avviare Guided Vision usando il pulsante di accessibilità fluttuante, un gesto di scorrimento a due dita o premendo entrambi i tasti del volume. Gli utenti che utilizzano Google TalkBack possono aprire il menu TalkBack con un tocco a tre dita e selezionare Guided Vision direttamente.

Google afferma che Guided Vision è un’utilità assistiva e può commettere errori. La funzione non è un dispositivo medico, un ausilio alla mobilità o un sostituto del bastone bianco, e non è destinata alla navigazione, alla guida di viaggio sicuro o al rilevamento di ostacoli. Gli utenti dovrebbero continuare a fare affidamento sugli ausili alla mobilità e sulle pratiche di viaggio sicuro già consolidate negli ambienti fisici.

Per iniziare, Google consiglia di aggiornare l’app Gemini e il software di sistema Android alle versioni più recenti.