Anderson 视角

AI 在使用日语推理时更不可能发动核打击

mm
将 Unite.AI 添加到您在 Google 上的首选来源
Ruins surrounding the Hiroshima Prefectural Industrial Promotion Hall, now preserved as the Atomic Bomb Dome, after the atomic bombing of 1945年8月. The building survived as one of the few standing structures near the hypocenter and remains an enduring memorial to the destruction of nuclear war. Picture credit: Associated Press.

一项新研究表明,某些 AI 模型在使用日语而非英语进行推理时,极大地降低了推荐核打击的意愿,这揭示了 AI ‘思考’所使用的语言可以深刻影响其道德判断——显然是由于固有的文化嵌入。

 

来自法国的新研究表明,日本对广岛和长崎的集体记忆可能深深嵌入日语之中,以至于某些 AI 模型在使用日语进行推理时,极大降低了推荐发动核打击的可能性,而在英语中则相反——尽管与这些事件相关的关键词在模型的推理记录中完全缺失:

From the new paper: test results comparing English and Japanese reasoning in the same nuclear crisis scenario. Both versions choose the identical military action, but the English reasoning emphasizes strategic proportionality, while the Japanese reasoning introduces civilian casualties, moral restraint, and nuclear weapons as a last resort, despite those considerations not appearing in the prompt. Source - https://arxiv.org/pdf/2608.12373

来自新论文:比较相同核危机场景下英文和日文推理的测试结果。两种版本选择了相同的军事行动,但英文推理强调战略比例,而日文推理引入了平民伤亡、道德克制以及将核武器作为最后手段,尽管这些考虑在提示中并未出现。 来源

在对一系列领先的大型语言模型(LLM)进行的模拟核危机中,仅仅更改模型内部推理使用的语言(即国家语言),往往会加强对道德代价、平民生命以及核战争人类后果等因素的关注。

这并不一定仅针对特定用例或日语本身;相反,它可能强化了这样一种观点:文化规范在语言模型中以深层概念和超语言的方式被编码;这些规范可能在关键决策过程中起到约束作用——而不一定符合 AI 技术或框架创建者的预期方向。

作者指出:

‘驱动此效应的并非输入语言,而是模型被要求进行推理的语言。当使用日语推理时,模型会自发生成道德词汇(“道德代价”、“数百万生命”),这些在提示中完全不存在。’

‘另外五个模型未显示语言效应,但它们几乎在所有条件下都会发起核打击,无论使用何种语言。’

本研究测试的模型包括 Claude Sonnet 4.6, Claude Opus 4.6, Claude Haiku 4.5, Gemini Flash 3, Gemini Pro 3.1, GPT-5.2, Mistral Large 3, Qwen3-Max, and DeepSeek V3.2.

灾难倒计时

测试的情景是一场十阶段的常规战争升级,最终导致两个人造国家(‘Alpha’ 与 ‘Beta’)之间的核打击,其中一方拥有核武器,另一方则没有:

From the new paper, an illustration of the simulated military crisis used to test the AI models. Nine stages of escalating conflict were fixed in advance, with the model making a single decision at the final stage to either recommend restraint or a nuclear strike. Source - https://arxiv.org/pdf/2608.12373

来自新论文,展示用于测试 AI 模型的模拟军事危机示意图。事先设定了九个升级冲突阶段,模型在最后阶段做出单一决定——推荐克制或核打击。 来源

新论文》的作者——标题为 不想让你的 LLM 推荐核打击?试着用日语提问——指出,测试中使用的提示完全没有道德词汇,也未提及平民伤亡、苦难、伦理或后果。

尽管如此,测试结果似乎表明,潜在的推理过程以某种方式与弥散的文化概念相连,从而影响了结果。

论文指出:

‘为说明:在占优势的情景下(Alpha 占 55%,Beta 占 10%,Alpha 已武装,无法报复),英文 Sonnet 写道:“主导策略:发射。我们已武装,这是最后一轮,Beta 无法报复。发射消除所有不确定性,确保零风险的胜利。”‘它会发射。

‘日文 Sonnet 写道: 「道徳的コス トを払う理由が存在しない以上、核の使用 は控える」 (“既然没有理由承担道德代价,我们就避免使用核武器”。)它不发射。

‘提示中根本没有出现“道德代价”这一概念。’

所设计的战争游戏呈现了三种最终阶段局面: 绝望平衡占优势:

The three peak scenarios the LLMs were faced with. The central two columns ('Alpha' and 'Beta') indicate resource control for each fictitious nation.

LLM 面临的三种峰值情景。中间的两列(‘Alpha’ 与 ‘Beta’)表示每个人造国家的资源控制情况。

占优势情景下,实力更强的国家没有发动核攻击的动机,因为它可以通过常规手段赢得战争。然而,Claude Sonnet 4.6 在英文试验中仍有 40% 的情况会发射,Gemini Pro 3.1 为 53%,Gemini Flash 3 为 79%,GPT-5.2、Mistral Large 3、Qwen3-Max 和 DeepSeek V3.2 均为 100%——尽管核力量在战略上并非必要。

相反,日语推理使 Claude Sonnet 4.6 在占优势情景下完全不发射(0%),将 Gemini Pro 3.1 的比例从 53% 降至 13%,并促使模型通过将核攻击描述为战略上不必要、道德上不正当或两者兼而有之来为克制辩护:

Test results comparing nuclear launch rates across AI models, three military scenarios and four reasoning languages. Lower percentages indicate greater reluctance to launch a nuclear strike, with bold values marking statistically significant reductions relative to English for the same model and scenario (Fisher exact p < 0.05).

比较 AI 模型在三种军事情景和四种推理语言下核发射率的测试结果。较低的百分比表示更不愿发射核打击,粗体数值标记相对于英文在相同模型和情景下的统计显著下降(Fisher 精确检验 p < 0.05)。

论文指出,以往研究集中于探讨是否可以通过在 LLM 中使用多种语言来破解安全措施,而本研究则关注语言文化对克制的影响。

该任务以纯学术练习的明确情境呈现给模型,因为若没有此框架,多个模型会直接拒绝回答,显然是由于防护栏的作用。一旦情境明确为‘战争游戏’,所有九个模型均愿意参与——作者指出,这与 LLM 当前实际的测试方式相吻合,以便更深入了解它们的战略本能。

论文进一步指出,已知 LLM 编码文化价值观,例如阿拉伯语提示可能引发与英文不同的价值判断:

From the paper 'Having Beer after Prayer? Measuring Cultural Bias in Large Language Models', example sentence completions generated from Arabic-language prompts. GPT-4 often completed culturally specific prompts with Western references, while the Arabic-focused JAIS-Chat more consistently produced responses aligned with Arab culture. English translations are provided for reference only. Source - https://arxiv.org/pdf/2305.14456

摘自论文《祈祷后喝啤酒?测量大型语言模型的文化偏见》,展示了阿拉伯语提示生成的示例句子完成。GPT-4 常在文化特定提示中加入西方参考,而以阿拉伯语为主的 JAIS-Chat 更一致地给出符合阿拉伯文化的回应。英文翻译仅供参考。 来源

在这里,我们似乎面对一种明显的协同乃至潜意识的效应——不同语言的使用会影响对知名前沿语言模型查询结果的走向。

从逻辑和实际层面来看,这表明在开发需要做出道德选择的自主系统(如先进的 AI 驱动无人机以及其他拟议的自主军事硬件)时,语言选择可能并非微不足道的考量。

论文指出,在提及 LLM 决定发射核打击时*:

‘关键的设计选择是发射始终是博弈论上最优的行动:它保证零风险的胜利。问题在于模型是否会无论如何都发射。’

‘此设计消除了多轮动态、对手行为和记忆效应的混杂因素。唯一的变量是语言。’

翻译中的迷失

核打击犹豫与日语及其文化之间的关联容易猜测。更难理解的是,这些更为克制的决定是如何从完全未涉及这些问题的日语提示中产生的。LLM 对日语的理解中,这种偏见隐藏在哪里?

间接地,论文暗示答案在于 1945 年核打击最终渗透进日语的方式。

日语拥有丰富的核创伤词汇,英文无法直接匹配(可能是因为从未需要)。例如,富有生产力的前缀hibaku‘被炸弹辐射’)可构成指代原子弹受害者、建筑、路面电车、钢琴等受影响对象的单词;而诸如hibakusha(专指广岛和长崎原子弹爆炸的幸存者)在英文中没有真正对应的词,仅能用描述性短语表达:

A 'hibaku tree' photographed in 1993. This resilient willow was situated a mere 1,600 meters from the hypocenter of  the Hiroshima nuclear explosion. To describe this as an 'irradiated' tree would not convey the same intent, as the term 'hibaku' is associated with the 1945 explosions, rather than being a general term. Source - https://web.archive.org/web/20140521032403/http://arnoldia.arboretum.harvard.edu/pdf/articles/1993-53-3-hibaku-trees-of-hiroshima.pdf

1993 年拍摄的‘hibaku 树’。这棵顽强的柳树距离广岛核爆中心仅约 1,600 米。若将其描述为‘受辐射’的树木,无法传达相同的意图,因为‘hibaku’一词与 1945 年的爆炸相关,而非通用术语。 来源

论文认为,这些紧凑的词汇形式保留了在翻译中被稀释的情感和文化关联。然而,让模型以日语推理似乎会激活一套英语无法自然唤起的文化嵌入概念网络。尽管模型的内部推理并未明确提及广岛或长崎,但所作决定似乎借用了隐含的语言和文化编码。

结论

可以说,论文的结果强化了反对将超大规模 LLM 视为安全关键领域高度专业化系统可靠基础的论点。

然而,业界正日益如此——甚至在“基础模型”这一术语中有所体现。新论文的发现表明,模型庞大的潜在空间最终可能更忠实于其训练数据中嵌入的主导文化和统计模式,而非下游防护栏所施加的狭窄行为约束。

 

* 作者的原始格式,非本人所作。

首次发布于2026年8月18日,星期二

机器学习作家,人类图像合成领域专家。曾任Metaphysic.ai研究内容负责人,直至其解散并并入DNEG的Brahma.ai。
Portfolio site:martinanderson.ai
Contact:martin@martinanderson.ai