Schopnosti AI při analogickém uvažování: ohrožují lidskou inteligenci?

Analogické uvažování, jedinečná schopnost, kterou lidé mají, aby řešili neznámé problémy tím, že vytvářejí paralely s známými problémy, bylo dlouho považováno za charakteristickou lidskou kognitivní funkci. Nicméně, průlomová studie provedená psychology z UCLA přináší přesvědčivé výsledky, které by nás mohly přimět přehodnotit toto.

GPT-3: dorovnává se lidskému intelektu?

Výzkum UCLA zjistil, že GPT-3, jazykový model AI vyvinutý OpenAI, prokazuje schopnosti uvažování téměř na stejné úrovni jako studenti vysokých škol, zejména když je zadán úkol řešit problémy podobné těm, které se objevují v inteligenčních testech a standardizovaných zkouškách jako SAT. Tato zjištění, zveřejněná v časopise Nature Human Behaviour, vyvolávají zajímavou otázku: zda GPT-3 napodobuje lidské uvažování kvůli svému rozsáhlému jazykovému tréninkovému datasetu, nebo zda využívá zcela nového kognitivního procesu?

Precizní fungování GPT-3 zůstává utajeno OpenAI, což zanechává výzkumníky z UCLA zvědavé ohledně mechanismu za jeho analogickými schopnostmi uvažování. Navzdory GPT-3 výkonnému výkonu na určitých úkolech uvažování, nástroj není bez svých nedostatků. Taylor Webb, hlavní autor studie a postdoktorální výzkumník z UCLA, poznamenal, „Zatímco naše zjištění jsou působivá, je důležité zdůraznit, že tento systém má významná omezení. GPT-3 může provádět analogické uvažování, ale má potíže s úkoly triviálními pro lidi, jako je využití nástrojů pro fyzický úkol.“

Schopnosti GPT-3 byly testovány pomocí problémů inspirovaných Ravenovými progresivními maticemi – testem zahrnujícím složité sekvence tvarů. Převodem obrázků do textu, který GPT-3 mohl rozluštit, Webb zajistil, že tyto byly zcela nové výzvy pro AI. Když byl porovnán s 40 studenty UCLA, GPT-3 nejenže odpovídal lidskému výkonu, ale také odrážel chyby, které lidé dělali. Model AI správně vyřešil 80 % problémů, překračující průměrný lidský skóre, ale spadající do rozmezí nejlepších lidských výkonů.

Tým dále prozkoumal GPT-3 schopnosti pomocí nepublikovaných otázek SAT analogy, s AI, který překonal lidský průměr. Nicméně, trochu selhal, když se snažil vyvodit analogie z krátkých příběhů, i když novější model GPT-4 ukázal lepší výsledky.

Překlenutí propasti mezi AI a lidskou kognicí

Výzkumníci z UCLA se nezastavili u pouhých srovnání. Začali vyvíjet počítačový model inspirovaný lidskou kognicí, neustále srovnávající jeho schopnosti s komerčními modely AI. Keith Holyoak, profesor psychologie z UCLA a spoluautor, poznamenal, „Náš psychologický model AI překonal ostatní v analogických problémech, až do poslední aktualizace GPT-3, který prokázal lepší nebo ekvivalentní schopnosti.“

Nicméně, tým identifikoval určitá oblast, kde GPT-3 zaostával, zejména v úkolech vyžadujících pochopení fyzického prostoru. V úkolech zahrnujících použití nástrojů, GPT-3 řešení byla výrazně mimo cíle.

Hongjing Lu, hlavní autor studie, vyjádřil údiv nad skoky v technologii za posledních dva roky, zejména v schopnosti AI uvažovat. Ale, zda tyto modely skutečně „myslí“ jako lidé, nebo zda pouze napodobují lidskou myšlenku, je stále předmětem debaty. Hledání vhledu do kognitivních procesů AI vyžaduje přístup k backendu modelů AI, skok, který by mohl tvarovat budoucí trajektorii AI.

Echoující tento názor, Webb uzavírá, „Přístup k backendu modelů GPT by enormně prospěl AI a kognitivním výzkumníkům. V současné době jsme omezeni na vstupy a výstupy, a chybí nám rozhodující hloubka, kterou jsme si přáli.“