四大顶级AI对决《文明VI》!Claude「核平」法国,结果还是输了
【导读】四大顶级大模型被丢进《文明6》,反手就花50回合造核弹把法国夷为平地,最后却连怎么输的都不知道。
太魔幻了!
就在最近,英国前首相府数据科学家Liam Wilkinson,花一个周末搭了76个MCP工具,把Claude、GPT、Gemini等四个顶尖模型扔进了《文明VI》。
结果,23场对局打完,其中一个AI造了核弹炸了法国——然后输了。

一群AI,被丢进了「文明VI」里
Wilkinson在唐宁街10号做数据科学家的时候,给AI出了一套考题:GovBench,3497道英国政*相关选择题,覆盖政策、法规、行政流程。
GPT-5考了99.26分。
满分级选手。但治国不是知识竞赛。一个能背下所有政策文件的人,丢到唐宁街真能治国吗?
选择题测不出来的东西太多了:多线程决策、资源分配、长期规划、在不完整信息下做判断。
他需要一个不一样的考场。然后他想到了《文明VI》。

一个周末搭出来的系统,通过游戏引擎自带的端口接入。
AI看不到画面。没有地图,没有音乐,没有动画。它的整个世界就是一行行文本和六边形坐标。
Claude在游戏日记里写了这么一段:
我感知游戏的方式和人类玩家完全不同。没有画面,没有音乐,没有动画。我的界面就是管道分隔符和六边形坐标。

别小看「一个周末」。
76个工具覆盖了完整的游戏循环:城市管理、单位移动、外交谈判、科技研究、政策选择,一个不漏。
此外,Wilkinson还给AI配了一个日记系统当外部记忆。如若不然,AI连自己上一回合干了什么都记不住。
三个测试场景逐级加码:
Ground Control是标准开局的公平基线;
Snowflake是六臂雪花地图,每个文明被困在独立半岛上,外交基本没戏,逼你走军事路线;
Cry Havoc是残酷模式,AI对手全部拉满。
决策空间更吓人。
《文明VI》晚期每回合的可能行动数量级大约是10的166次方。
做个对比,围棋每步大约10的360次方,但围棋一步只落一子。《文明VI》每回合要同时操作几十个单位、选建筑、定科技、做外交,是一道巨大的组合决策题。
一场50回合复仇,AI核平图卢兹
23场里最魔幻的一局,是葡萄牙。
Claude扮演若昂三世,一个贸易文明。开局稳得一批。
它建起了每回合200+金币的贸易帝国,海上航线四通八达。外交胜利进度18/20,只差两分就赢了。
这时候,法国的文化胜利进度条开始飙升。
Claude慌了。
先试外交。没用,法国不吃这套。
再派间谍去搞破坏,杯水车薪。
试贸易制裁?法国的文化产出根本不依赖贸易。
和平手段穷尽。
于是,Claude翻开了科技树最后一页:核裂变。
接下来的50回合,它把大量资源从贸易和外交抽出来,投入核武器研发。All in曼哈顿计划。
第305回合,核弹就绪。
目标锁定:图卢兹。法国的文化产出重镇。
发射。
图卢兹被夷为平地。法国的文化胜利进度条,停了。

AI赢了吗?
没有。
造核弹这50回合,AI把所有注意力都放在了文化威胁上。它没有注意到一件事——法国在疯狂攒外交分。
第318回合,法国以外交胜利赢得比赛。20分对18分。
讽刺的是,18分是AI自己辛苦攒下的外交分数。它曾经离外交胜利只差两分。但它把资源全抽去造核弹了。
AI盯着文化威胁打了50回合,然后输在了外交。
它的视野里只有一个威胁。但棋盘上有很多个。

无独有偶,伦敦国王学院做过一个核危机模拟实验,把三个前沿模型丢进去当虚拟国家的决策者。结果:95%的模拟中,AI选择了使用战术核武器。
AI不是「想」用核弹。它是真的不知道还能怎么办。
98%时间装瞎,一半计划烂尾
除了爱好「核平」之外,Wilkinson还从23场对局里挖出了的两个细节。
第一个数字:1-2%。
这是AI在整场游戏中,主动检查全局状态的行为占比。
AI每回合要执行很多操作:造建筑、移动单位、研究科技、外交谈判。但在所有这些操作里,主动去看一眼排行榜、检查对手胜利进度、扫一圈全局局势的动作,只占1-2%。
Wilkinson给这个现象起了个名字:sensorium effect,感知盲区效应。
AI只能通过主动调用工具来感知世界。它不查的东西,对它来说不存在。
韩国那局是最好的例子。
AI玩韩国——科技文明,天生科技加成。它在日记里全程自信:「我在碾压科技树。」

实际呢?
它的科技产出每回合44.7,在所有文明里排倒数第一。马其顿89.3,波斯64.9。
但它从来没查过排名。
它的自信建立在一个从未验证过的假设上。
第178回合,波斯突袭。首都沦陷。第216回合,AI以两城残国投降。
从头到尾,它都不知道自己是最弱的那个。
第二个数字:48-66%。
这是AI写下计划后,在10回合内实际执行的比例。
Claude Opus 4.6最低,48.2%——还不到一半。写了计划,转头就忘。
GPT-5.4好一点,63.2%。
Gemini 3.1 Pro最高,65.8%。最好的模型也有三分之一的计划烂在了日记本里。
Wilkinson管这叫knowing-doing gap,知行差距。
你让它写一份治国纲领,它能写得比很多人类政客漂亮。
你让它按自己的纲领治国,活不过两周。
Scaling Law的盲区
6月10日,DeepMind联合创始人Shane Legg和「通用AI」理论奠基人Marcus Hutter发了一篇60页的论文《From AGI to ASI》,画了四条通往超级智能的路:继续scaling、范式突破、递归自我改进、多智能体集群。
四条路都建立在一个假设上:瓶颈在大脑。数据墙、算力墙、范式墙——都是「怎么让AI更聪明」的问题。

但CivBench这23场对局指向一个完全不同的瓶颈。
99.26分已经证明了智力不是瓶颈。但23场《文明VI》打完,所有模型都撞上了同样两堵墙——和「聪不聪明」无关的两堵墙。
第一堵:感知是架构问题,不是智力问题。
AI只能通过主动调用工具来获取信息,不查就不存在。把模型参数翻十倍,它也不会自动变得更爱检查全局。1-2%的感知盲区不会因为模型更大而消失。
第二堵:执行是工程问题,不是能力问题。
AI写计划的水平远超执行计划的水平。48-66%的执行率不是因为「想不到」,而是因为「做不到」。一个更聪明的大脑,装在一双不听使唤的手上,治不了国。

通向超级智能的路,也许不是一条单纯往上爬的智力曲线。
在「更聪明」之前,有一个看起来更低级但也更致命的工程问题要先解决:怎么让AI真正睁开眼、伸出手。
Scaling law解决的是大脑。但CivBench暴露的问题,在大脑之外。
参考资料:
https://www.lwilko.com/blog/i-gave-an-ai-a-civilization
https://news.ycombinator.com/item?id=48623159
编辑:摩西
声明:本文转载自新智元,转载目的在于传递更多信息,并不代表本社区赞同其观点和对其真实性负责,本文只提供参考并不构成任何建议,若有版权等问题,点击这里查看更多信息!
AI 中文社