01 定义
什么是 AGI,什么不是
「AGI」一词的使用往往并不严谨。在任何关于风险的讨论变得有意义之前,都需要一个可操作的定义,以及一种衡量某个系统究竟离达到这一定义有多近的方法。
可操作的定义
通用人工智能并没有一个统一公认的测试标准。在本手册中,它指的是这样一种系统: 具备广泛的认知能力、达到或超越人类水平的表现、能够可靠地迁移到陌生任务,并具备 足够的自主性以完成具有实际后果的工作。每一部分都很重要:目前的通用模型在某些方 面确实广泛,在某些评测上表现也相当出色,但仍然存在不可靠、参差不齐的问题,这使 得简单地用「是」或「不是」AGI 来贴标签具有误导性。
通用性、表现水平与自主性是三个彼此独立的维度。一个系统可以就许多主题侃侃而谈, 却在长任务上仍不可靠;也可能在某一领域超越专家,却无法将这种能力迁移到其他领 域。因此,本手册追踪的是一组综合指标,而不是把「能否迁移」当作某条神奇的分界线。
值得关注的能力门槛
以下四项信号有助于区分不同情景,但没有一项能构成完整的 AGI 测试。其中一些可以直 接测量;另一些则要通过评测来推断,而这些评测的有效性与覆盖面仍存在争议。
| 门槛 | 衡量内容 | 为何重要 |
|---|---|---|
| 自主任务时长 | 在给定可靠性水平下,智能体能够完成的基准任务所对应的人类完成时间。 | 记录了在长时程软件、机器学习与网络安全任务上的快速进展,但并不能衡量所有真实工作,也不等同于字面意义上的自主运行时长。 |
| 自主使用工具 | 自行编写并运行代码、自行调配算力、招募其他软件智能体。 | 使模型成为一个影响力超出自身上下文窗口的行动者。 |
| 情境意识 | 系统对自身正被评估这一事实、评估者是谁,以及该评估奖励何种行为的认知模型。 | 会削弱评估本身的有效性:一个知道自己正被测试的系统,在测试中可能表现出不同的行为。 |
| 递归自我改进 | 系统对其后继系统的设计做出实质性贡献。 | 这是一种被提出的加速机制,而非已被观察到或普遍认可的硬性门槛。 |
一些研究者与实验室领袖怎么说
预测因人而异,并非测量结果。2025 年 3 月,Google DeepMind 首席执行官给出了这样 一个个人估计:
Demis Hassabis forecast in March 2025 that AGI could start to emerge within five to ten years.
CNBC, Reported interview
另一份 2023 年的联合声明由研究者、企业高管及其他公众人物签署,以政策语言提出了 灾难性风险。该声明记录的是签署者的立场,并不是对概率的估计:
Signatories to the Statement on AI Risk hold that mitigating the risk of extinction from AI should be a global priority alongside pandemics and nuclear war.
safe.ai, Signed statement
定义为何决定应对方案
本手册后续的每一项应对方案——无论是财务、数字还是物理层面——都取决于这些门槛中 究竟哪一个已被真正跨越。为「更聪明的聊天机器人」制定的家庭方案,与为一个能够自 主管理资金、编写并部署软件、在几乎无人监督的情况下执行长期计划的系统制定的方案, 截然不同。第 02 章将探讨每一项门槛在经济与国家层面可能意味着什么;本章则是理解 那一章所需的基础词汇。