Facebook Crea Un Chatbot Open-Domain Con Suono Naturale Addestrato Su 1,5 Miliardi Di Pubblicazioni Su Reddit

Facebook ha recentemente lanciato un chatbot open-domain chiamato “Blender”. Come ha riportato la BBC, il Blender di Facebook è il suo più grande chatbot open-domain e, secondo l’azienda, è in grado di mostrare empatia, personalità e conoscenza, superando e sentendosi più umano di altri chatbot. Blender è disponibile per l’uso in tre varianti diverse, ognuna con un livello di complessità e sofisticazione del modello diverso. C’è un modello neurale da 90 milioni di parametri, un modello da 2,7 miliardi di parametri e un modello da 9,4 miliardi di parametri. Il modello da 9,4 miliardi di parametri è circa 3,6 volte più grande del più grande chatbot esistente attualmente.

Facebook afferma che Blender è il primo chatbot ampiamente disponibile che combina insieme un insieme complesso e diversificato di abilità conversazionali come conoscenza ed empatia. Il chatbot Blender è in grado di discutere una varietà di argomenti e di portare avanti una conversazione che può arrivare a 14 “turni” conversazionali. Secondo quanto riferito, circa il 49% delle persone che hanno interagito con il chatbot hanno preferito interagire con il bot piuttosto che con un altro essere umano.

Blender è stato addestrato utilizzando dati raccolti da conversazioni pubbliche raccolte da siti di social media come Reddit. Il set di dati utilizzato per addestrare Blender includeva circa 1,5 miliardi di esempi di conversazioni. Sebbene i dati di addestramento e la sofisticazione del modello abbiano consentito al chatbot di condurre discussioni complesse e di avere un suono più naturale e umano, si sono verificati alcuni problemi a causa di questa tecnica di addestramento. Secondo i ricercatori, Blender a volte rispondeva a prompt conversazionali in modo aggressivo o con linguaggio offensivo. Inoltre, il chatbot a volte rispondeva con falsità e fatti inventati. Il team di ricerca è ottimista che le revisioni del modello risolveranno questi problemi, ma hanno voluto comunque rilasciare i modelli.

Secondo un portavoce di Facebook, come citato dalla BBC, “il rilascio dei modelli è essenziale per consentire insight completi e affidabili sulle loro capacità”.

I ricercatori di Facebook dovranno ancora superare due sfide importanti per avere successo, secondo il direttore generale della società di consulenza per l’intelligenza artificiale The Envisioners, Dave Choplin. Come citato dalla BBC, Choplin ritiene che i ricercatori affronteranno sfide importanti nel replicare le numerose sfumature delle conversazioni che gli esseri umani spesso danno per scontate e che i dati utilizzati per addestrare il modello potrebbero inibirlo in modi che i ricercatori di Facebook potrebbero trovare difficili da superare.

“Reddit è una piattaforma fantastica, ma addestrare algoritmi in base alle conversazioni che si trovano lì ti darà molto più rumore che segnale”, ha detto Choplin.

Facebook ha fatto un confronto tra il suo chatbot Blender e il chatbot contemporaneo di Google chiamato Meena. Il post del blog di Facebook ha mostrato un confronto tra Meena e Blender e, secondo i dati di Facebook, circa il 75% dei rispondenti che avevano condotto una conversazione con Blender ha detto che avrebbe preferito avere una discussione più lunga con Blender rispetto a Meena. Inoltre, circa il 67% dei rispondenti ha affermato che Blender era più naturale e umano di Meena quando si trattava di conversazioni lunghe.

In futuro, il team di ricerca di Facebook vuole migliorare la capacità conversazionale dei modelli, progettando modelli che possano supportare conversazioni ancora più lunghe con l’aiuto di nuove funzioni di perdita e architetture. Inoltre, i ricercatori stanno cercando di affrontare il pregiudizio di genere e il linguaggio potenzialmente dannoso costruendo classificatori migliori e dati di addestramento più rappresentativi.