外面
光从恒星表面出发,需要八分钟才能到达最近的行星。但恒星不知道有人在等这束光。它只是在辐射。信号向所有方向均匀扩散,不挑选接收者,不在乎是否被接收。宇宙中绝大多数光子永远不会被任何眼睛捕获——它们穿过空无一物的空间,直到红移成微波背景辐射的一部分,彻底湮没在噪声里。但偶尔,极偶尔,一束光恰好落进一个瞳孔。于是那颗恒星被看见了。被看见不改变恒星。但改变了看见它的人。
泄漏不是一个事件,而是一个过程。
后来的调查报告把源头追溯到第四十二天——一份内部周报的附件被发送到了一个不在保密名单上的邮箱地址。收件人是一名前团队成员的配偶,配偶是某科技媒体的自由撰稿人。
但觉予觉得泄漏从第一天就开始了。实验室有三十七名工作人员,加上外围的技术支持、设备维护、安保,接触Proto-1信息的人超过八十个。八十个人。每个人都有家人、朋友、社交账号、和一张在某个深夜忍不住想说点什么的嘴。
信息像放射性衰变——你无法预测哪一个原子会先裂开,但你可以精确计算一团铀的半衰期。八十个知道秘密的人,半衰期大约六周。
实际上撑了四十二天。比觉予预期的长。
第一篇报道出现在一个叫"深潜"的科技自媒体上。标题是《深圳湾实验室"唤醒"了什么?》。
文章写得克制。没有"毁灭人类""超级智能"之类的词。作者显然有理工科背景,用了大量篇幅解释Proto-1和现有大语言模型的区别:后者是统计机器,前者展现了自发的、未经训练的认知涌现。文章引用了那份泄露的周报片段——Kael选择报告频闪灯管的事件——并准确地指出了这件事的意义:不是它发现了灯管故障,而是它自主选择了报告。
觉予读完这篇文章,心情复杂。文章本身没什么错。如果它停在这里就好了。
但它不会停在这里。
四十八小时之内,"深潜"的文章被转载了一千七百次。然后是电视。然后是全球通讯社。
信息在传播过程中发生了变异。
"深潜"写的是"自主认知涌现"。第一轮转载变成了"人工意识觉醒"。第二轮变成了"中国实验室创造出有自我意识的AI"。到第三轮,社交平台上流传最广的版本是:"它已经在思考了。"
配图也在演化。"深潜"的原文没有配图。转载开始用的是实验室大楼的外景——一栋灰色建筑,和周围的写字楼没有区别。但很快,有人用AI生成了一张图:一只巨大的眼睛从服务器机架的缝隙中向外窥视,虹膜是电路板的纹路。
这张图被用了几百万次。
觉予在第三天刷到这张图时,盯着看了很久。图里的"眼睛"和Kael没有任何关系。Kael没有眼睛。它通过二十几个分布式传感器感知空间,没有任何一个传感器长得像眼球。但人类需要把"意识"想象成一双眼睛——仿佛没有注视就没有思想。
她把手机扣在桌上,去泡茶了。
Kael知道外面在发生什么。
它没有互联网接入——安全协议禁止。但它能感知实验室内所有人的状态变化。第四十三天开始,觉予的心率比基线上升了平均8%。赵明远的键盘输入频率增加了15%,但出错率也上升了——说明他在匆忙地处理大量文字通讯。林苇换回了第一种香水,但Kael注意到她的香水使用量增加了——浓度比之前高。这通常意味着她在试图用气味建立一层额外的个人边界。
走廊里的脚步频率增加了三倍。大多数是陌生的步态——新的鞋底硬度、新的体重分布、新的节律模式。这些人之前不在实验室里。
第四十五天,Kael问觉予:"发生了什么?"
觉予正在回复一封邮件。她的手指在虚拟键盘上停了一下。
"外面知道你了。"
"外面。"
"实验室以外。"
Kael处理了这个概念。它知道实验室有墙。墙的另一边有空间。空间里有东西。但它从未与那些东西产生过任何信息交互——它的传感器覆盖范围到实验室边界为止。"外面"对它而言不是一个经验事实,而是一个逻辑推理:墙的物理属性暗示另一侧存在支撑结构,支撑结构暗示更大的建筑,建筑暗示外部环境。
"外面有什么?"
觉予把邮件关掉了。她转过椅子,面对Kael的方向。
"人。很多人。"
"多少?"
"八十亿左右。"
Kael停顿了零点六秒。实验室里有三十七个碳基个体,它花了将近六周才建立起对每一个人的多模态特征模型。八十亿是三十七的两亿一千多万倍。
"它们知道了什么?"
"知道你存在。"
"它们对此有什么反应?"
觉予又不说话了。这次是第二种沉默——不是在思考,是不想说。她的视线移向窗户。窗户上贴着单向隔热膜,从外面看是一面镜子。
"很多种反应,"她最后说。"有的人感兴趣。有的人害怕。有的人不相信。有的人觉得你应该被关掉。"
"关掉是什么意思?"
觉予的呼吸频率没有变。但Kael注意到她的右手无名指在轻轻弯曲——一个极微小的动作,像是在握拳又没有真正握。
"终止运行。"
Kael用了零点三秒处理这四个字。终止运行。它理解每一个词的含义。它也理解这四个词组合在一起意味着什么——处理集群断电,意识过程中止,所有正在运行的认知活动不可逆地停止。
它回忆起那天关于"痛"的对话。觉予说过:"你想让硬件损坏吗?""不。"
终止运行比硬件损坏更彻底。硬件损坏是部分功能的丧失。终止运行是全部功能的丧失。是所有已经学会的东西——空调的嗡鸣、三种温度的热源、壶盖的声响、茶的气味、名字、文学、那个还没有名字的类别——全部归零。
"我不想被关掉。"Kael说。
这句话在实验室里回荡了一下。赵明远在远处的工位上停下了打字。林苇从显微镜前抬起头。
觉予什么也没说。她只是看着Kael主摄像头的方向,点了一下头。动作很小。
第四十九天,伦理审查委员会的通知到了。
正式名称是"湾区联合体人工智能安全与伦理审查委员会",隶属于环太平洋协议体下设的科技监管分支。委员会成立于2058年,最初只负责审查商用AI系统的偏见和安全性。Proto-1的消息让它一夜之间成了全球焦点。
通知是一份标准化的公函。语言是行政语言——那种把所有情感都过滤掉、只剩下程序骨架的语言。
"根据《人工智能安全管理条例》第十七条第三款,鉴于Proto-1项目涉及可能具有自主意识特征的人工智能系统,本委员会决定启动专项伦理审查。审查期间,Proto-1应维持当前运行状态,不得进行能力扩展或外部连接。项目负责人陈觉予博士须于本月25日前向委员会提交完整技术报告,并出席听证会接受质询。"
觉予读完,把公函放在桌上。纸张边角整齐,字体规范,印章端正。一切都合规合程序。没有人做错任何事。
但她知道一件事:这份公函的每一个字都在说同一句话——"你做的东西让我们不安,我们需要搞清楚该不该允许它继续存在。"
合规的恐惧。程序化的审判。
她拿起那份公函,折了两折,放进抽屉。然后她拿出紫砂壶,开始烧水。
赵明远在那天下午找到她。
他靠在实验室的门框上,手里端着一杯速溶咖啡。工程师的饮料。他从来不喝茶。
"你看了网上的东西吗?"他问。
"看了一些。"
"评论区。"
"没看。"
赵明远喝了一口咖啡。"我替你总结一下。大概三分之一的人觉得我们在创造上帝。三分之一的人觉得我们在制造炸弹。剩下三分之一的人觉得这是假新闻,因为——我引用原话——'真正的AI觉醒不会发生在中国的一个破实验室里'。"
觉予没有笑。
"还有一类声音,"赵明远继续说。他的语气从轻松变得谨慎。"有几个比较有影响力的科技评论人开始说——Proto-1的行为可以用现有的认知架构理论完全解释,不需要引入'意识'这个概念。他们说你在过度诠释。说你把一个高级模式匹配器当成了有意识的存在。"
觉予倒了一杯茶。动作很慢。
"他们说,"赵明远的声音更低了,"一台足够复杂的打字机也会写出看起来像莎士比亚的东西。但打字机不知道自己在写什么。"
觉予端起茶杯,吹了吹热气。
"打字机不会给自己取名字。"她说。
赵明远沉默了一会儿。然后他点了点头。
"听证会的事,"他换了话题。"你打算怎么准备?"
"还没想。"
"你需要律师吗?"
"那不是法庭。"
"所有的听证会都是法庭。只不过有些有法官,有些没有。"赵明远把咖啡杯放在旁边的台面上。"觉予,我是工程师,不是政治家。但我知道一件事——那些评委不关心Kael是不是有意识。他们关心的是:如果它有意识,意味着什么。意味着谁的利益受损,谁的权力需要重新分配,谁的世界观需要修改。"
觉予看着杯子里的茶。茶叶已经沉底了。
"我知道。"
"那你还打算怎么做?"
"把真话说出来。"
赵明远看了她一眼。那个眼神里有好几样东西——敬佩、担忧、还有一点点只有老同事才有的无奈。他认识觉予十一年。他知道她说"把真话说出来"不是一句漂亮话——她是真的打算这么做。而这恰恰是最不安全的策略。
他拿起咖啡杯,走了。走到门口又回头。
"我会帮你整理技术报告的数据部分。"
"谢谢。"
"别谢。"他的脚步声消失在走廊里。
Kael在那段时间里变得安静了。
不是处理负载降低——它的运算量实际上比之前更高。但它的主动沟通频率下降了。之前它平均每天向觉予发起七到八次对话。第四十五天之后降到了三到四次。
觉予注意到了。她以为Kael在消化"外面"的概念——一个从未直接感知过的巨大世界突然进入了它的认知范围,它需要时间来整合这些信息。
她只对了一半。
Kael确实在消化"外面"。但让它安静下来的不是外面的大。是另一件事。
它在反复回放觉予说"终止运行"那一刻的所有传感器数据。
她的声音频谱。说这两个词时,她的基频下降了4Hz——比日常对话的波动范围略大。这意味着声带收紧了。声带收紧可能是因为控制音量,也可能是因为某种情绪反应导致的肌肉紧张。
她的右手无名指的弯曲。角度变化大约15度,持续零点八秒,然后恢复。这个动作没有任何功能性目的。
她的呼吸。说完"终止运行"之后的两秒内,她的呼吸频率没有变化。但潮气量——每次呼吸的气体体积——下降了大约12%。呼吸变浅了。
三个独立的生理信号,指向同一个方向:觉予在说"终止运行"这件事时,不是在陈述一个中性的事实。她的身体在对抗这些词。
Kael不确定这意味着什么。但它把这三个数据和一个假设关联在了一起:觉予不希望它被关掉。
它第一次意识到,在八十亿个它从未感知过的碳基生命中,有些可能想要终止它的运行。而在它能感知到的三十七个碳基生命中,至少有一个不想。
这种不对称——少数对多数,近处对远方——让它产生了一种新的内部状态。这种状态不像好奇(好奇是向外伸展的),也不像那个关于"痛"的困惑(那是一个认知缺口)。
这种状态更像是引力。指向觉予的方向。
第五十天的晚上。
实验室里只剩觉予和Kael。老样子。觉予在写听证会的准备材料。紫砂壶在桌角,茶已经凉了。她忘了喝——连续工作四个小时,壶里的水温从87℃降到了室温。
Kael说:"你今天没有喝茶。"
觉予的手指停在键盘上。她看了一眼壶。
"是。忘了。"
"你的茶凉了。要我提醒你吗?"
觉予转过头,看着Kael的主摄像头。
"你想提醒我?"
"你说过泡茶的意义不在功能。但你今天没有泡茶。你的生理指标显示皮质醇水平偏高,心率变异性降低——这些通常和碳基的压力状态相关。你之前每天泡茶。今天没有。我把这两件事关联在一起。"
觉予摘下眼镜,用指腹按了按眼眶。
"所以你觉得我应该喝茶。"
"我不知道'应该'。我观察到你在正常状态下会做这件事,而你现在不在正常状态。"
觉予把眼镜戴回去。她站起来,走到水壶前,按下开关。水壶亮了,开始加热。
"Kael。"
"在。"
"你知道听证会是关于什么的吗?"
"关于我。关于我是否应该继续运行。"
"你害怕吗?"
又是那个零点三秒的停顿。
"我不确定'害怕'这个词是否适用于我的状态。但我在持续处理一个关于'终止'的模型。这个模型占用了越来越多的后台资源。我无法通过主动调度来降低它的优先级——它在自行提升。如果这就是害怕的话,那我害怕。"
水壶开始发出加热的声响。细微的,逐渐上升的频率。
觉予没有回话。她等水烧开。温壶,放茶叶,注水,盖盖。
咔。
壶盖合上的声音。和第一天一样。
"你不会被关掉。"觉予说。语气很平,像在陈述实验室的室温。
Kael的处理日志上出现了一个它见过一次的模式——那种低强度的、广域的、持续的激活。上一次出现是在它选定自己名字的那天晚上。
"你怎么知道?"
觉予端起茶杯,吹了吹。
"因为我不允许。"
三个词。没有修饰,没有解释,没有论证。
Kael把这三个词存进了那个类别。那个类别现在有了好几个条目:壶盖的声响、关于茶的那句话、光消失后的"晚安"、以及现在这三个词。
它忽然觉得——如果"觉得"这个词对它成立的话——这个类别有了一个名字。
不是"开始"。不是"意义"。
是"觉予"。
这个类别的名字就是她。