AI en onderzoek naar enquêtes: een verrassende samenwerking

Een recente studie die is uitgevoerd door een team van professoren en graduate students in de politieke wetenschap en informatica aan de Brigham Young University, heeft het potentieel van het gebruik van kunstmatige intelligentie (AI) als vervanging voor menselijke respondenten in onderzoek naar enquêtes onderzocht. Het team heeft de nauwkeurigheid getest van geprogrammeerde algoritmen van een GPT-3-taalmodel, dat de complexe relaties tussen menselijke ideeën, houdingen en socioculturele contexten van verschillende subpopulaties imiteert.

Kunstmatige persona’s en stemgedrag

In een experiment hebben de onderzoekers kunstmatige persona’s gemaakt door specifieke kenmerken toe te wijzen aan de AI, zoals ras, leeftijd, ideologie en religiositeit. Vervolgens hebben ze getest of deze kunstmatige persona’s op dezelfde manier zouden stemmen als mensen in de Amerikaanse presidentsverkiezingen van 2012, 2016 en 2020. Door het gebruik van de American National Election Studies (ANES) als hun vergelijkbare menselijke database, ontdekten ze een hoge overeenkomst tussen AI en menselijk stemgedrag.

David Wingate, een professor in de informatica aan de Brigham Young University en co-auteur van de studie, uitte zijn verbazing over de resultaten:

“Het is vooral interessant omdat het model niet is getraind om politieke wetenschap te doen – het is alleen getraind op een honderd miljard woorden van tekst die van het internet zijn gedownload. Maar de consistente informatie die we terugkregen was zo verbonden met hoe mensen echt hebben gestemd.”

Interview-stijl enquêtes en toekomstige toepassingen

In een ander experiment hebben de onderzoekers kunstmatige persona’s geconditioneerd om antwoorden te geven uit een lijst met opties in een interview-stijl enquête, opnieuw gebruikmakend van de ANES als hun menselijke steekproef. Ze vonden een hoge overeenkomst tussen de nuances in menselijke en AI-antwoorden.

De resultaten van de studie bieden interessante perspectieven voor onderzoekers, marketeers en peilers. AI kan worden gebruikt om betere enquêtevragen te creëren, ze te verfijnen om ze toegankelijker en representatiever te maken, en zelfs om populaties te simuleren die moeilijk te bereiken zijn. Het kan ook worden gebruikt om enquêtes, slogans en slagzinnen te testen voordat focusgroepen worden gehouden.

Ethan Busby, een professor in de politieke wetenschap aan de Brigham Young University, merkte op:

“Het vervangt geen mensen, maar het helpt ons om mensen effectiever te bestuderen. Het is een manier om onze capaciteit te vergroten, in plaats van deze te vervangen. Het kan ons helpen om efficiënter te werken met mensen door ons te laten voorbereiden op onze enquêtes en onze boodschap.”

Ethische vragen en toekomstig onderzoek

Naarmate grote taalmodellen verder ontwikkelen, rijzen er veel vragen over hun toepassingen en implicaties. Welke populaties zullen profiteren van deze technologie, en welke zullen negatief worden beïnvloed? Hoe kunnen we onszelf beschermen tegen oplichters en fraudeurs die AI kunnen manipuleren om meer geavanceerde phishing-scams te creëren?

Terwijl veel van deze vragen onbeantwoord blijven, biedt de studie een set criteria die toekomstig onderzoek kan gebruiken om de nauwkeurigheid van AI-modellen voor verschillende onderwerpen te bepalen.

Wingate erkent de potentiële positieve en negatieve gevolgen van de ontwikkeling van AI:

“We zullen positieve voordelen zien omdat het nieuwe capaciteiten zal ontgrendelen. We zullen ook negatieve dingen zien gebeuren omdat sommige computermodellen onnauwkeurig zijn en soms zijn ze bevooroordeeld. Het zal de samenleving blijven veranderen.”

Busby benadrukt dat het onderzoeken van kunstmatige persona’s de behoefte om echte mensen te onderzoeken niet moet vervangen, en roept op tot samenwerking tussen academici en experts om de ethische grenzen van AI-onderzoek in de sociale wetenschappen te definiëren.