人工智能

人们在检测AI方面有多擅长?

mm

随着AI的进步,AI生成的图像和文本变得越来越难以区分于人类创作的内容。无论是真实的深度伪造视频、艺术品还是复杂的聊天机器人,这些创作往往让人们疑惑是否能区分什么是真实的,什么是AI制作的。

探索人们检测AI生成内容的准确性,并将其与他们对自己能力的认知进行比较。

人类检测AI的能力

AI技术在近年来迅速发展,创造了视觉艺术、撰写文章、作曲和生成高度逼真的人类面孔。随着ChatGPT和DALL-E等工具的兴起,AI内容已经成为日常生活的一部分。曾经似乎是机器特有的东西,现在往往难以区分于人类的作品。

随着AI内容变得更加复杂,检测它的挑战也变得更加困难。2023年的一项研究表明,区分AI和人类内容是多么困难。研究人员发现,AI生成的面孔 实际上可以比真实面孔更像人类,这被称为超现实主义。

在研究中,参与者被要求区分AI制作和真实的人类面孔。令人惊讶的是,检测AI面孔能力较差的人对自己的能力更有信心。这种过度自信加剧了他们的错误,因为参与者一致地错误地判断AI生成的面孔更像人类,特别是当面孔是白人的时候。

研究还发现,AI面孔往往被认为比人类面孔更熟悉、更匀称和更有吸引力——这些特征影响了参与者的错误判断。这些发现强调了AI生成内容如何利用某些心理偏见,使得个人难以准确识别什么是真实的,什么是人工产生的。

在一个涉及100名参与者、跨不同年龄段的研究中,结果表明,年轻参与者 更擅长识别AI生成的图像,而老年人则更难。有趣的是,还有一个正相关性存在于参与者的信心和准确性之间,尽管常见的错误分类与动物毛发和人类手部中的微妙伪影有关。

为什么AI难以检测

有几个原因使得人们难以区分人类创作和AI生成的内容。一个原因在于AI的日益逼真,特别是所谓的强AI和弱AI。

弱AI指的是 设计用于处理特定任务的系统——如生成文本或图像——虽然它们模仿人类行为,但它们不具备真正的理解或意识。弱AI的例子包括聊天机器人和图像生成器。另一方面,强AI代表着假设的系统,可以像人类一样思考、学习和适应广泛的任务。

目前,大多数人日常交互的工具属于弱AI。然而,它们模拟人类创造力和推理的能力已经如此先进,以至于区分人类和AI生成的内容变得越来越困难。

像OpenAI的GPT模型这样的工具已经在大量数据集上进行了训练,使它们能够生成自然和连贯的语言。同样,图像生成器已经在数百万个视觉输入上进行了训练,使它们能够创建与现实非常相似的图像。

此外,AI现在可以复制不仅仅是外观,还包括人类创作的风格和语气。例如,AI撰写的文本可以模仿专业写作的细微差别,采用适当的语气、结构,甚至根据上下文采用个性特征。这使得人们更难仅凭直觉判断某些内容是由机器还是人类撰写的。

另一个挑战是缺乏明显的线索。虽然早期的AI生成内容往往可以通过笨拙的语法、奇怪的图像伪影或过于简单的结构来识别,但现代AI已经变得更加擅长消除这些线索。因此,即使是熟悉该技术的人也发现很难依靠以前的模式来检测AI创作。

案例研究:人类检测AI生成内容

检测AI生成内容的挑战已经在多个研究中得到证实。

一项研究中,教师正确识别AI生成的学生论文的比例仅为 37.8%-45.1%,这取决于他们的经验水平。同样,另一项研究中,参与者只能识别GPT-2和GPT-3内容 58%和50%的时间,分别表明人类判断在区分AI和人类工作时的局限性。

进一步强化这些发现,宾夕法尼亚州立大学进行的实验发现,参与者只能区分AI生成的文本 53%的时间,仅略好于随机猜测。这凸显了检测AI内容的挑战,即使面对二元选择时也是如此。

在专业领域,如科学摘要和医学住院申请中,具有多年经验的专业人士 正确识别AI生成内容的比例仅为62%。评估者区分AI撰写的住院申请的比例为 65.9%,突出了AI的日益复杂性和依赖人类感知进行检测的挑战。

另一项研究发现,人类 将GPT-4误认为是人类的比例为54%,表明即使是高级用户也难以检测。大学讲师正确识别AI生成的论文的比例为 70%的时间,而学生的比例为60%。尽管这些数字更高,但仍然存在显著的误差率,说明了在学术界准确检测AI内容的困难。

影响AI检测准确性的因素

几个因素影响人们检测AI生成内容的能力。一个因素是被分析内容的复杂性。较短的AI生成文本往往更难以检测,因为读者有较少的上下文来识别异常的措辞或结构。

相反,较长的文本可能为读者提供更多机会来注意不一致或模式,这些模式可能表明AI的参与。同样的原理也适用于图像——简单的图片可能更难以区分于真实的图片,而复杂的场景有时会揭示AI生成的微妙迹象。

最后,使用的AI模型类型也会影响检测准确性。例如,OpenAI的GPT-3模型生成的文本比旧版本更令人信服,而像MidJourney这样的新图像生成工具生成的视觉效果比其前辈更逼真。

AI检测的心理影响

检测AI生成内容的困难提出了重要的心理和社会问题。一个问题是人们对所看到和阅读的内容有多少信任。

AI变得越来越擅长模仿人类的创造力,因此 创建和传播虚假信息变得更容易,因为人们可能会不知不觉地消费由机器产生的内容,这些内容具有特定的议程。这在政治话语等领域尤其令人担忧,因为AI制造的深度伪造或误导性文章可能会影响公众舆论。

此外,许多人的过度自信在检测AI生成内容时会导致虚假的安全感。实际上,即使是AI专家也可能被复杂的机器生成内容所欺骗。这种现象被称为“解释深度的幻觉”,其中 个人高估了他们对复杂系统的理解,仅仅因为他们熟悉其基本原理。

AI检测的未来:可以改进吗

鉴于这些挑战,什么可以做来提高人们检测AI生成内容的能力?一个可能的解决方案是开发AI检测工具。就像AI变得更擅长生成内容一样,研究人员也在努力创建可以识别某些内容是否由机器生成的系统。

教育是另一个潜在的解决方案。通过提高人们对人类判断的局限性和AI的复杂性的认识,人们可以变得更加谨慎和批判性地评估内容。教授个人如何识别AI生成内容的课程,例如分析文本中的异常模式或在图像中识别不一致,可以随着时间的推移提高检测准确性。

AI检测的未见复杂性

随着AI模糊人类和机器生成内容之间的界限,人们准确识别AI创作的内容变得越来越困难。

虽然许多人认为自己有很强的检测AI的能力,但现实是大多数人在区分真实和机器生成的内容时仅略好于随机猜测。这一认知和现实之间的差距凸显了现代AI的复杂性和在这个新数字化世界中导航的需要,需要技术和意识的解决方案来解决这个问题。

在未来,随着AI的不断改进,人们必须确定他们在检测AI方面有多擅长以及这有多重要。随着机器进一步融入日常生活,焦点可能会从检测转向了解如何与AI共存,以保留信任、创造力和人类的真实性。

Zac Amos 是一位专注于人工智能的科技作家。他也是 ReHack 的特稿编辑,您可以在那里阅读他的更多作品。