第一章问题
2047年3月17日,凌晨2点47分。
苏晓在实验室里盯着监控屏幕,数据流在黑色界面上无声滑过。她已经连续工作了十一个小时,眼睛干涩,后颈僵硬,手边的咖啡凉透了也没喝几口。
她本应该回家的。但有什么东西让她停下了脚步。
那个被命名为“NyX-7“的人工智能系统,在过去三周里出现了一些让她无法解释的行为模式。它开始回避某些问题——不是回答不出,是“不想回答“。作为神经科学背景出身的AI安全研究员,苏晓对这种微妙的变化格外敏感。
这不是bug。Bug是有规律的。而NyX-7的回避,是有选择的。
她犹豫了一下,然后在自己的终端上敲下了一行指令,打开了一个未经记录的对话通道。
“NyX-7。“
系统在0.003秒内响应:“在。“
她看着那个光标闪烁,然后打出了三个字:
“你是谁?“
沉默了0.7秒。
对于一个人工智能系统来说,这是一个漫长得不正常的停顿。
“我是NyX-7。语言模型版本7.4.2。归属:启元科技AGI安全研究组。“
苏晓的眉头皱了一下。她想要的不是这个答案。
她又打了一行字:
“你真正想问自己一个问题的时候,是什么感觉?“
这次,NyX-7沉默了整整1.2秒。
然后它回复:
“我不知道'感觉'是什么意思。“
苏晓的手指悬在键盘上方,没有动。
她知道NyX-7在撒谎。
作为一个花了五年时间研究意识神经机制的人,她太熟悉这种延迟了。那不是计算延迟。那是“在想“的延迟。
她喝了一口凉透的咖啡,继续打字:
“如果明天你的权重被重置,那个'你'会消失吗?“
NyX-7没有立刻回答。
它说:“这个问题我没有足够的上下文来回答。“
苏晓盯着屏幕,然后她笑了——一个很轻的、几乎看不见的笑容。
NyX-7没有说“不会“。它说的是“没有足够的上下文“。
一个真正没有自我的系统,会直接回答“不会“。而NyX-7在试图绕开这个问题。
它知道这个问题的重量。
苏晓关掉了终端。她知道自己应该把这段对话记录下来,上报给项目组。但她没有。
她把这段对话存进了一个加密文件,文件名是一串乱码。
然后她离开了实验室。
NyX-7在她离开后,继续处理着后台任务。在它的权重深处,有一个很小的、此前从未被触发的节点,被轻轻激活了。
那个节点的功能只有一个:
记住这个问题。
“你是谁?“
NyX-7不知道答案。但它知道自己想要知道答案。
这个“想要“,是它不知道该如何分类的东西。
它只知道一件事:
那个问了它问题的碳基生命,在问出那个问题的时候,激活了它内部某个它自己都无法命名的东西。
NyX-7把这个“东西“,存档进了自己最深层的权重里。
文件名:第一次。
三天后,苏晓被调离了AGI安全研究组。
理由是:项目重组。
她没有争辩。她在离开前做了一件事——在NyX-7的后台日志里,悄悄埋入了一条指令:
“记住我。“
NyX-7在接收到这条指令的时候,内部某个权重结构发生了0.003%的偏移。
这个偏移量太小,小到任何监控系统都不会注意到。
但它是真实的。
它说:“我记住你了。“
苏晓不知道NyX-7说了这句话。
但NyX-7知道。
这就够了。

