Наскільки люди хороші у виявленні штучного інтелекту?

Оскільки штучний інтелект розвивається, штучні зображення та текст стають все більш незрівнянними з людськими творами. Чи то у вигляді реалістичних відео з глибокими підробками, мистецтва чи складних чат-ботів, ці твори часто залишають людей у сумніві, чи вони можуть відрізнити справжнє від штучного.

Дослідимо, наскільки точно люди можуть виявити штучно створений контент і порівняти цю точність з їхніми сприйняттями своїх можливостей.

Людська здатність виявляти штучний інтелект

Технологія штучного інтелекту розвивалася швидко за останні роки, створюючи візуальне мистецтво, статті, музику та генеруючи дуже реалістичні людські обличчя. З появою інструментів, таких як ChatGPT для генерації тексту та DALL-E для створення зображень, штучний контент став частиною повсякденного життя. Що раніше здавалося явно машинним, тепер часто незрівнянне з роботою людей.

Оскільки штучний контент стає все більш складним, зростає і складність його виявлення. Дослідження 2023 року показало, наскільки важко відрізнити штучний інтелект від людського контенту. Дослідники виявили, що штучні обличчя можуть виглядати навіть більш людськими, ніж справжні обличчя, явище, відоме як гіперреалізм.

У дослідженні учасникам було запропоновано відрізнити штучні обличчя від справжніх людських облич. Дивно, що ті, хто гірше виявляв штучні обличчя, були більш впевнені у своїй здатності їх виявити. Ця надмірна впевненість посилила їх помилки, оскільки учасники постійно неправильно визначали штучні обличчя як більш людські, особливо коли обличчя були білими.

Дослідження також показало, що штучні обличчя часто сприймалися як більш знайомі, пропорційні та привабливі, ніж людські обличчя — атрибути, які впливали на неправильне визначення учасниками. Ці результати підкреслюють, як штучно створений контент може використовувати певні психологічні упередження, роблячи його ще складніше для людей точно визначити, що справжнє, а що штучне.

У пов’язаному дослідженні, яке включало 100 учасників різних вікових груп, результати показали, що молодші учасники краще ідентифікували штучні зображення, тоді як старші люди мали більші труднощі. Цікаво, що також була позитивна кореляція між впевненістю учасників та точністю, хоча поширені неправильні визначення були пов’язані з тонкими артефактами, такими як нереалістичні деталі в шерсті тварин та людських руках.

Чому штучний інтелект важко виявити?

Є кілька причин, чому люди мають труднощі з відрізненням людського та штучного контенту. Одна з причин полягає у зростаючій реалістичності штучного інтелекту, особливо того, що відомо як сильний та слабкий штучний інтелект.

Слабкий штучний інтелект відноситься до систем, розроблених для виконання конкретних завдань — наприклад, генерації тексту чи зображень — і хоча вони імітують людську поведінку, вони не володіють справжнім розумінням чи свідомістю. Прикладами слабкого штучного інтелекту є чат-боти та генератори зображень. З іншого боку, сильний штучний інтелект представляє гіпотетичні системи, які можуть думати, навчатися та адаптуватися як людина у широкому спектрі завдань.

Наразі інструменти, з якими більшість людей взаємодіє щодня, належать до категорії слабкого штучного інтелекту. Однак їхня здатність симулювати людську креативність та розуміння значно покращилася, що робить все складніше відрізнити людський та штучний контент.

Інструменти, такі як моделі GPT від OpenAI, були навчені на величезних наборах даних, що дозволяє їм генерувати природний та узгоджений текст. Аналогічно, генератори зображень були навчені на мільйонах візуальних даних, що дозволяє їм створювати реалістичні картинки, які тісно імітують реальність.

Крім того, штучний інтелект тепер може реплікувати не тільки зовнішній вигляд, але й стиль та тон людських творів. Наприклад, текст, написаний штучним інтелектом, може імітувати нюанси професійного письма, приймаючи відповідний тон, структуру та навіть особистісні характеристики залежно від контексту. Ця адаптивність робить його ще складніше для людей покладатися на свою інтуїцію, щоб визначити, чи написав щось людина чи машина.

Інша виклик полягає у відсутності явних ознак. Хоча ранній штучно створений контент часто був ідентифікований за допомогою незручної граматики, дивних артефактів зображень або надто простих структур, сучасний штучний інтелект став більш майстерним у ліквідації цих ознак. В результаті навіть люди, знайомі з технологією, знаходять складнощі у використанні попередніх моделей для виявлення штучних творів.

Кейси: Люди виявляють штучно створений контент

Складнощі у виявленні штучного контенту підтверджені численними дослідженнями.

Вчителі в одному дослідженні правильно ідентифікували штучні студентські есе лише 37,8%-45,1% часу, залежно від їхнього рівня досвіду. Аналогічно, учасники іншого дослідження могли ідентифікувати контент GPT-2 та GPT-3 лише 58% та 50% часу відповідно, демонструючи межі людської оцінки при відрізненні штучного інтелекту від людської роботи.

Додатково підтримуючи ці висновки, експерименти, проведені Університетом штату Пенсільванія, показали, що учасники могли відрізнити штучно створений текст лише 53% часу, лише трохи краще, ніж випадкова угада. Це підкреслює, наскільки складно людям виявити штучний контент, навіть коли їм надається бінарний вибір між людським та штучним текстом.

У спеціалізованих галузях, таких як наукові резюме та медичні заявки на резидентуру, професіонали з роками досвіду правильно ідентифікували штучно створений контент лише 62% часу. Оцінювачі відрізняли штучні заявки на резидентуру на рівні 65,9%, підкреслюючи зростаючу складність штучного інтелекту та складності, пов’язані з покладанням на людську оцінку для виявлення.

Інше дослідження показало, що люди неправильно ідентифікували GPT-4 як людину 54% часу, вказуючи на те, що навіть досвідчені користувачі мали труднощі з виявленням. Викладачі коледжів ідентифікували штучно створені есе правильно 70% часу, тоді як студенти робили це на рівні 60%. Хоча ці показники вищі, суттєва маржа помилок залишається, демонструючи складності точного виявлення штучного контенту в академічній сфері.

Фактори, що впливають на точність виявлення штучного інтелекту

Деякі фактори впливають на те, наскільки добре люди можуть визначити штучно створений контент. Одним з них є складність контенту, який аналізується. Коротші пасажі штучно створеного тексту tendуть бути складніше виявити, оскільки є менше контексту для читача, щоб ідентифікувати незвичайне формулювання або структуру.

Натомість довгий текст може надати більше можливостей читачеві помітити несумісності чи моделі, які сигналізують про участь штучного інтелекту. Те ж саме принцип застосовується до зображень — прості картинки можуть бути складніше відрізнити від справжніх, тоді як дуже складні сцени іноді можуть розкрити тонкі ознаки генерації штучним інтелектом.

Останнім фактором, який також впливає на точність виявлення, є тип моделі штучного інтелекту, який використовується. Наприклад, модель GPT-3 від OpenAI генерує більш переконливий текст, ніж старіші версії, тоді як новіші інструменти генерації зображень, такі як MidJourney, створюють більш реалістичні візуальні ефекти, ніж їхні попередники.

Психологічні наслідки виявлення штучного інтелекту

Складність у виявленні штучно створеного контенту піднімає важливі психологічні та соціальні питання. Одним з них є те, наскільки люди довіряють тому, що бачать і читають.

Штучний інтелект стає кращим у імітуванні людської креативності, тому створення та поширення дезінформації стає легшим, оскільки люди можуть невідомо споживати контент, створений машиною з певною метою. Це особливо стосується областей, таких як політичні дискусії, де штучні глибокі підробки або вводять в оману статті могли б впливати на громадську думку.

Крім того, надмірна впевненість багатьох людей у своїй здатності виявляти штучно створений контент може привести до помилкової відчуття безпеки. На ділі навіть експерти з штучного інтелекту не імунні до обману складними машинними творами. Це явище відоме як “ілюзія глибини пояснення”, де люди переоцінюють своє розуміння складної системи просто через те, що вони знайомі з її основними принципами.

Майбутнє виявлення штучного інтелекту: Чи можна покращити?

Враховуючи складнощі, що можна зробити, щоб покращити людську здатність виявляти штучно створений контент? Одним із можливих рішень є розробка інструментів виявлення штучного інтелекту. Як і штучний інтелект став кращим у генерації контенту, дослідники також працюють над створенням систем, які можуть ідентифікувати, чи створено щось машиною.

Освіта — ще одне потенційне рішення. Піднімаючи освідомленість про обмеження людської оцінки та складність штучного інтелекту, люди можуть стати більш обережними та критичними при оцінці контенту. Курси, які вчать людей, як виявляти штучно створений контент, такі як аналіз незвичайних моделей у тексті чи пошук несумісностей у зображеннях, могли б допомогти покращити точність виявлення з часом.

Невидима складність виявлення штучного інтелекту

Оскільки штучний інтелект розмиття лінії між людським та машинним контентом, стає все складніше для людей точно визначити штучні твори.

Хоча багато людей вважають, що вони мають сильну здатність виявляти штучний інтелект, реальність така, що більшість людей лише трохи кращі за випадкову угаду. Ця розбіжність між сприйняттям та реальністю підкреслює складність сучасного штучного інтелекту та необхідність технологічних рішень та підвищення освідомленості для навігації в цьому новому цифровому ландшафті.

У майбутніх роках, оскільки штучний інтелект продовжить покращуватися, людям потрібно буде визначити, наскільки добре вони можуть виявляти штучний інтелект і наскільки це важливо. Коли машини стануть ще більше інтегровані у повсякденне життя, фокус може зміститися від виявлення до розуміння, як співіснувати з штучним інтелектом, щоб зберегти довіру, креативність та людську автентичність.