Schopnosti AI při analogickém uvažování: Překonává lidskou inteligenci?

Analogické uvažování, jedinečná schopnost, kterou lidé mají k řešení neznámých problémů pomocí srovnání s známými problémy, je dlouho považováno za charakteristickou lidskou kognitivní funkci. Nicméně, průlomová studie provedená psychology z UCLA přináší přesvědčivé výsledky, které by nás mohly vést k přehodnocení tohoto.

GPT-3: Překonává lidskou inteligenci?

Výzkum UCLA ukázal, že GPT-3, jazykový model AI vyvinutý OpenAI, prokázal schopnosti uvažování téměř na stejné úrovni jako studenti vysokých škol, zejména při řešení problémů podobných těm, které se objevují v inteligencích testech a standardizovaných zkouškách, jako je SAT. Toto zjištění, publikované v časopise Příroda lidského chování, vyvolává zajímavou otázku: Zda GPT-3 napodobuje lidské uvažování díky svému rozsáhlému jazykovému tréninkovému datasetu, nebo zda se dostává do zcela nového kognitivního procesu?

Přesné fungování GPT-3 zůstává utajeno OpenAI, což nechává výzkumníky z UCLA zvědavé ohledně mechanismu za jeho analogickými uvažovacími schopnostmi. Navzdory GPT-3 výkonnému výkonu na určitých úkolech uvažování, nástroj není bez svých nedostatků. Taylor Webb, hlavní autor studie a postdoktorální výzkumník z UCLA, poznamenal: “Zatímco naše výsledky jsou působivé, je důležité zdůraznit, že tento systém má významná omezení. GPT-3 může provádět analogické uvažování, ale má potíže s úkoly triviálními pro lidi, jako je použití nástrojů pro fyzické úkoly.”

Schopnosti GPT-3 byly testovány pomocí problémů inspirovaných Ravenovými progresivními maticemi – testem zahrnujícím složité sekvence tvarů. Převodem obrazů do textového formátu, který GPT-3 mohl rozluštit, Webb zajistil, že tyto byly zcela nové výzvy pro AI. Když byl srovnán s 40 studenty UCLA, GPT-3 nejenže odpovídal lidskému výkonu, ale také odrážel chyby, které lidé dělali. Model AI přesně vyřešil 80 % problémů, překonal průměrný lidský skóre, ale spadl do rozsahu nejlepších lidských performerů.

Tým dále prozkoumal GPT-3 schopnosti pomocí nezveřejněných analogických otázek z SAT, s AI, který překonal lidský průměr. Nicméně, trochu selhal, když se pokusil vyvodit analogie ze stručných příběhů, i když novější model GPT-4 ukázal lepší výsledky.

Překonání rozdílu mezi AI a lidským kognitivním procesem

Výzkumníci z UCLA nebudou zastavovat u pouhých srovnání. Začali vyvíjet počítačový model inspirovaný lidským kognitivním procesem, neustále srovnávající jeho schopnosti s komerčními modely AI. Keith Holyoak, profesor psychologie z UCLA a spoluautor, poznamenal: “Náš psychologický model AI překonal ostatní v analogických problémech, dokud GPT-3 nezískal poslední upgrade, který ukázal lepší nebo ekvivalentní schopnosti.”

Výzkumníci identifikovali určité oblasti, kde GPT-3 zaostával, zejména v úkolech vyžadujících pochopení fyzického prostoru. V úkolech zahrnujících použití nástrojů, GPT-3 řešení byla výrazně mimo cíle.

Hongjing Lu, hlavní autor studie, vyjádřil údiv nad skoky v technologii za posledních dva roky, zejména v schopnosti AI uvažovat. Ale zda tyto modely skutečně “myslí” jako lidé, nebo zda pouze napodobují lidské myšlení, je stále předmětem debaty. Hledání vhledů do kognitivních procesů AI vyžaduje přístup k backendu modelů AI, skok, který by mohl tvarovat budoucí trajektorii AI.

Webb souhlasí s tímto názorem a uzavírá: “Přístup k backendu modelů GPT by enormně prospěl výzkumu AI a kognitivním výzkumníkům. V současné době jsme omezeni na vstupy a výstupy a chybí nám rozhodující hloubka, kterou jsme si přáli.”