Wat is de Turing Test en waarom is het belangrijk?

Als je rond Artificial Intelligence (AI) bent geweest, heb je ongetwijfeld gehoord van ‘De Turing Test‘. Dit was een test die voor het eerst werd voorgesteld door Alan Turing in 1950, de test was ontworpen om het ultieme experiment te zijn om te zien of een AI menselijk niveau intelligentie had bereikt. Conceptueel, als de AI de test kan doorstaan, heeft het intelligentie bereikt die gelijkwaardig is aan, of niet te onderscheiden is van die van een mens.

We zullen onderzoeken wie Alan Turing is, wat de test is, waarom het belangrijk is en waarom de definitie van de test mogelijk moet evolueren.

Wie is Alan Turing?

Turing is een excentrieke Britse wiskundige die erkend wordt voor zijn futuristische baanbrekende ideeën.

In 1935, op de leeftijd van 22, won zijn werk over waarschijnlijkheidstheorie hem een fellowship van King’s College, University of Cambridge. Zijn abstracte wiskundige ideeën zorgden ervoor dat hij in een compleet andere richting ging in een veld dat nog niet was uitgevonden.

In 1936 publiceerde Turing een paper die nu wordt erkend als de basis van de informatica. Hierin vond hij het concept van een ‘Universale Machine’ dat elke set instructies kon decoderen en uitvoeren.

In 1939 werd Turing door de Britse regering gerekruteerd voor hun codebrekende afdeling. Op dat moment gebruikte Duitsland een zogenaamde ‘Enigma-machine‘ om alle militaire en maritieme signalen te versleutelen. Turing ontwikkelde snel een nieuwe machine (de ‘Bombe‘) die in staat was om Enigma-berichten op industriële schaal te breken. Deze ontwikkeling wordt beschouwd als instrumenteel in het helpen van het terugdringen van de agressie van nazi-Duitsland.

In 1946 keerde Turing terug naar zijn revolutionaire idee uit 1936 om een elektronische computer te ontwikkelen, die in staat was om verschillende soorten berekeningen uit te voeren. Hij produceerde een gedetailleerd ontwerp voor wat de Automatic Computing Engine (ACE) werd genoemd.

In 1950 publiceerde Turing zijn baanbrekende werk waarin hij vroeg of een “Machine Kan Denken?“.  Deze paper transformeerde zowel de informatica als de AI volledig.

In 1952, na door een jonge man bij de politie te zijn gemeld, werd Turing veroordeeld wegens grove onfatsoenlijkheid vanwege zijn homoseksuele activiteiten.  Vanwege dit werd zijn veiligheidsmachtiging voor de regering ingetrokken en werd zijn carrière verwoest. Om hem te straffen werd hij chemisch gecastreerd.

Met zijn leven verwoest werd hij later door zijn schoonmaker in zijn huis gevonden op 8 juni 1954. Hij was de dag ervoor overleden aan cyanidevergiftiging. Een half opgegeten appel lag naast zijn lichaam. De conclusie van de coroner was zelfmoord.

Gelukkig leeft zijn nalatenschap voort.

Wat is de Turing Test?

In 1950 publiceerde Alan Turing een baanbrekend paper met de titel “Computing Machinery and Intelligence” in Mind magazine. In dit gedetailleerde paper werd de vraag “Kunnen Machines Denken?” gesteld. Het paper stelde voor om de zoektocht naar een definitie van machine-intelligentie te laten varen en in plaats daarvan de machine te testen met het ‘imitatie-spel’. Dit eenvoudige spel wordt gespeeld met drie personen:

• een man (A)
• een vrouw (B),
• en een ondervrager (C) die van elk geslacht kan zijn.

Het concept van het spel is dat de ondervrager in een aparte kamer zit dan de man (A) en de vrouw (B), het doel is voor de ondervrager om te bepalen wie de man is en wie de vrouw is. In dit geval is het doel van de man (A) om de ondervrager te misleiden, terwijl de vrouw (B) kan proberen de ondervrager (C) te helpen. Om het eerlijk te maken, mogen geen verbale aanwijzingen worden gebruikt, in plaats daarvan worden alleen getypte vragen en antwoorden heen en weer gestuurd. De vraag wordt dan: Hoe weet de ondervrager wie hij kan vertrouwen?

De ondervrager kent hen alleen bij hun labels X en Y, en aan het einde van het spel zegt hij simpelweg of ‘X is A en Y is B’ of ‘X is B en Y is A’.

De vraag wordt dan, als we de man (A) of de vrouw (B) verwijderen en vervangen door een intelligente machine, kan de machine zijn AI-systeem gebruiken om de ondervrager (C) te misleiden en te doen geloven dat het een man of een vrouw is? Dit is in wezen de aard van de Turing Test.

In andere woorden, als je zou communiceren met een AI-systeem zonder het te weten, en je zou aannemen dat de ‘entiteit’ aan de andere kant een mens is, kan de AI je oneindig misleiden?

Waarom de Turing Test ertoe doet

In Alan Turing’s paper gaf hij aan dat hij geloofde dat de Turing Test uiteindelijk kon worden doorstaan. Hij zegt: “Ik geloof dat rond het jaar 2000, over ongeveer vijftig jaar, het mogelijk zal zijn om computers te programmeren met een opslagcapaciteit van ongeveer 10⁹, om ze het imitatie-spel zo goed te laten spelen dat een gemiddelde ondervrager niet meer dan 70% kans heeft om de juiste identificatie te maken na vijf minuten van ondervraging.”

Als we naar de Turing Test kijken door een moderne bril, lijkt het zeer mogelijk dat een AI-systeem een mens kan misleiden voor vijf minuten. Hoe vaak hebben mensen interactie gehad met support-chatbots zonder te weten of de chatbot een mens of een bot is?

Er zijn veel rapporten over de Turing Test die zijn doorstaan. In 2014, een chatbot-programma genaamd Eugene Goostman, dat een 13-jarige Oekraïense jongen simuleert, zou de Turing-test hebben doorstaan op een evenement georganiseerd door de University of Reading. De chatbot zou 33% van de rechters bij de Royal Society in Londen hebben overtuigd dat het een mens was. Critici wezen er snel op dat de test ontoereikend was, dat veel rechters niet overtuigd waren, de duur van de test (slechts 5 minuten), evenals het gebrek aan bewijs voor deze prestatie.

In 2018, een Google Duplex-reserveringssysteem met de hulp van Google Assistant, belde een kapperszaak om een afspraak te maken voor een knipbeurt. In dit geval stelde het AI-systeem zich niet voor als AI, en tijdens het telefoongesprek deed het alsof het een mens was terwijl het met de receptionist van de kapperszaak sprak. Na een korte uitwisseling werd een knipbeurt met succes gepland en hingen beide partijen op.

https://youtu.be/0YaAFRirkfk

Nonetheless, in een tijdperk van Natural Language Processing (NLP), met zijn subgebieden van Natural-language understanding (NLU) en natural-language interpretation (NLI), moet de vraag worden gesteld, of een machine die vragen stelt en beantwoordt zonder de context achter wat het zegt volledig te begrijpen, werkelijk intelligent is?

Als je de technologie achter Watson bekijkt, een computersysteem dat in staat is om vragen te beantwoorden die in natuurlijke taal zijn gesteld, ontwikkeld door IBM om Jeopardy-kampioenen te verslaan, wordt het duidelijk dat Watson de wereldkampioenen kon verslaan door een grote hoeveelheid kennis van het internet te downloaden, zonder de context achter deze taal te begrijpen. Er waren 200 miljoen pagina’s met informatie, van een verscheidenheid aan bronnen, waaronder Wikipedia. Er was een beperking dat Watson geen toegang had tot het internet tijdens het spelen van een spel, maar dit is slechts een kleine beperking voor een AI die eenvoudigweg toegang kan krijgen tot alle menselijke kennis voordat het spel begint.

Soortgelijk aan een zoekmachine, werden trefwoorden en referentiepunten gemaakt. Als een AI dit niveau van begrip kan bereiken, dan zouden we moeten overwegen dat, op basis van de huidige ontwikkelingen in de technologie, het misleiden van een mens voor 5 of 10 minuten simpelweg niet voldoende is.

Moet de Turing Test Evolueren?

De Turing Test heeft een opmerkelijke prestatie geleverd door de tand des tijds te doorstaan. Niettemin, AI heeft sinds 1950 dramatisch geëvolueerd. Elke keer dat AI een prestatie bereikt waarvan we dachten dat alleen mensen het konden, verhogen we de lat. Het zal alleen een kwestie van tijd zijn totdat AI in staat is om de Turing Test consistent te doorstaan zoals we die nu begrijpen.

Als we de geschiedenis van AI bekijken, is de ultieme maatstaf voor of AI menselijk niveau intelligentie kan bereiken bijna altijd gebaseerd op of het mensen kan verslaan in verschillende spellen. In 1949 publiceerde Claude Shannon zijn gedachten over het onderwerp van hoe een computer zou kunnen worden gemaakt om schaak te spelen, omdat dit werd beschouwd als de ultieme top van menselijke intelligentie.

Het duurde tot 10 februari 1996, na een zware partij van drie uur, dat de wereldkampioen schaak Garry Kasparov de eerste partij van een zes-partijen-match verloor tegen Deep Blue, een IBM-computer die 200 miljoen zetten per seconde kon evalueren. Het duurde niet lang voordat schaak niet langer werd beschouwd als de top van menselijke intelligentie. Schaak werd vervangen door het spel Go, een spel dat meer dan 3000 jaar geleden in China is ontstaan. De lat voor AI om menselijk niveau intelligentie te bereiken werd verhoogd.

Fast forward naar oktober 2015, AlphaGo speelde zijn eerste wedstrijd tegen de regerend drievoudig Europees kampioen, Mr Fan Hui. AlphaGo won de eerste wedstrijd tegen een Go-professional met een score van 5-0. Go wordt beschouwd als het meest geavanceerde spel ter wereld met zijn 10³⁶⁰ mogelijke zetten. Plotseling werd de lat weer verhoogd.

Uiteindelijk was het argument dat een AI in staat moest zijn om teams van spelers te verslaan in MMORPG (massively multiplayer online role-playing games). OpenAI nam snel de uitdaging aan door diepe versterking te gebruiken.

Door deze consistente verhoging van de lat, zouden we de Turing Test opnieuw moeten definiëren. De huidige test is mogelijk te veel gebaseerd op misleiding en de technologie in een chatbot. Mogelijk, met de evolutie van robotica, zullen we eisen dat een AI om werkelijk menselijk niveau intelligentie te bereiken, moet kunnen interacteren en “leven” in onze werkelijke wereld, in plaats van een spelomgeving of een gesimuleerde omgeving met zijn eigen regels.

Als een robot in plaats van ons te misleiden, kan interacteren met ons als elk ander mens, door gesprekken te voeren, ideeën en oplossingen voor te stellen, dan pas zal de Turing Test zijn doorstaan. De ultieme versie van de Turing Test kan zijn wanneer een AI een mens benadert en probeert ons te overtuigen dat het zelfbewust is.

Op dat punt zullen we ook Kunstmatige Algemene Intelligentie (AGI) hebben bereikt. Het zal dan onvermijdelijk zijn dat de AI/robot ons snel in intelligentie zal overtreffen.