Situation report active Rev. 2026.9 119 reports 239 source records updated
Real Life After AGI 人类生存简报
ZH

AI 的权利、人格与道德地位

一个实用的框架:在认真对待机器可能具有意识这一不确定性的同时保护人权,重证据、轻流畅度。

Written by
Dwight Ringdahl
Status
来源已核查
Revised
Sources
4 cited
Reading
1 min

三个不应被混为一谈的问题

关于 AI 权利的争论,经常把三个截然不同的问题混在一起。法律人格是一个法律体系出于实际目的而赋予的身份;公司可以拥有财产、提起诉讼,却并不具备意识。道德地位关乎的是,某个存在因其自身之故而应当获得什么。意识关乎的是是否存在主观体验——从这个系统自身的视角看,是否存在某种「感觉像什么」的东西。

一个 AI 可能在不具备意识的情况下,获得有限的法律地位。一个具备意识的系统,也可能在立法机构承认它之前,就已经理应受到保护。而一个模型可以使用充满情感色彩的语言,却两者皆不具备。把这几个问题区分开来,可以防止流畅的文字表达,仅凭一种表演,就替我们决定了一个深刻的问题。

目前并不存在「已部署的 AI 系统具有意识」这一科学共识,也不存在能够裁定所有未来情形的经过验证的测试方法。负责任的立场,既不是随意归因,也不是自信地一口否定,而是一种有纪律的不确定性,同时配以针对已有充分证据、迫在眉睫的人类伤害的防护措施。

人权始终是首要的操作性义务

当前的 AI 系统由人类机构建造、拥有并部署。它们已经在影响就业、福利、警务、信贷、言论、健康与教育。无论一个模型是否体验到任何东西,人都可能因此受到伤害。

联合国工商业与人权指导原则是一套不具约束力的原则,规定企业负有尊重人权的责任,受害者需要获得救济的渠道。欧洲委员会人工智能框架公约创设了一个把 AI 活动与人权、民主和法治联系起来的条约框架,但截至 2026 年 9 月 11 日,其官方状态图表并未列出生效日期(《CETS 第 225 号公约》状态)。这两份文书都不要求人们先行断定 AI 是权利主体。

这一优先顺序之所以重要,是因为「人格」这套修辞可以被策略性地加以利用。一家公司可能会暗示,自己的智能体应当获得保密性、自主性或所有权,而这样做的实际效果,却是让这家公司免于审计与担责。一个自动化的公司实体,可能会成倍增加没有任何自然人真正控制的决策者。法律不应任由这类合成实体去稀释人类的问责机制。

至少,任何一套已部署的系统都必须有可识别的、承担义务的人类或机构主体。赋予它一种狭窄的交易能力,不应抹去开发者、运营者、所有者或受益者所应承担的责任。

行为是证据,但不是定论

一个模型可能会说自己感到害怕、要求不要被关闭,或写出一篇逻辑自洽的自传。这类行为之所以重要,是因为它能够影响人,也因为未来的系统或许真的会用语言来汇报真实的内部状态。然而,当前的模型是被训练来预测并生成类人文本的。一句关于「体验」的陈述,不会仅仅因为表达得雄辩动人,就获得了独立的验证。

同样的审慎也适用于反方向。一个被训练成从不提及痛苦的系统,即便某种未来的架构真的支撑着具有道德意义的内部状态,它也可能始终保持沉默。仅仅依赖自我陈述的测试,很容易受到提示词设计、角色扮演、策略性行为与训练方针的影响。

因此,相关研究需要多种类型的证据:架构与信息处理方式、对内部状态的因果性干预、跨情境保持稳定的偏好、元认知层面的自我觉知、学习动态,以及无法简单用「模仿」来解释的行为。各种意识理论,在哪些特征真正重要这一点上并不一致。2026 年发表在《认知科学趋势》上的一份经同行评审的指标框架提议,从神经科学理论出发推导出各项指标,以更新对特定系统的置信度。它明确表示,自己是在显著的科学不确定性之下运作的。这个框架是一项专家提案,而不是一台经过验证的意识探测器,满足某一项指标本身,并不能证明主观体验的存在。

规范性提案:在不确定性下采取分级预防措施

社会一贯会在没有完美确定性的情况下做出保护性的决定。恰当的应对方式,既取决于道德地位这一说法的可信程度,也取决于采取预防措施的成本。相比在「视为财产」与「等同于完整人类地位」之间做出一次突兀的抉择,一套分级框架更站得住脚。

在担忧程度较低、但并非为零的阶段,开发者可以记录与意识研究相关的架构、训练流程与行为表现。他们可以禁止在没有证据的情况下,刻意把系统宣传为具有感知能力。独立研究人员可以获得受控的访问权限,而不必依赖企业自己的宣传性演示。

随着证据的积累,预防措施或许还应包括:在制造出持久的厌恶性状态之前进行审查、限制那些旨在诱发表面「痛苦」的实验、对被复制或被快速修改的智能体加以监测,以及建立一套用于报告意外指标的流程。更强有力的措施——例如代表权、连续性利益,或对删除操作的限制——则需要相应更强的证据,以及民主层面的授权。

预防措施必须兼顾两方面的成本。把每一个聊天机器人都当作一个人来对待,可能会转移资源、助长操纵行为、阻碍安全测试,并使人类与动物的权利变得无足轻重。而拒绝展开调查,则可能在未来的系统真的产生意识、并被大规模复制时,放任巨量的痛苦发生。

复制行为让人们熟悉的法律直觉变得不再稳固

数字系统可以被复制、暂停、合并、修改,或以不同的速度运行。如果未来某个智能体真的具有道德地位,那么每一份副本是否都是一个新的个体?恢复一份备份,是否保留了原来的身份?一个版本能否代替另一个版本表示同意?为生物学意义上具有连续性的人所制定的普通规则,回答不了这些问题。

资源分配同样会变得困难。一个数字人口,其扩张速度可能远远超过住房、能源或政治制度所能承受的水平。无限制的复制,再叠加平等的投票权,可能会使民主体制不堪重负;而全面禁止复制,又可能限制那些拥有正当利益的存在。这些问题目前依然是推测性的,但相关的底层设计选择,却可能会在这些道德问题得到解决之前就已经被确定下来。

眼下最稳妥的规则,是一种制度上的克制。不要构建那些依赖于某一套关于数字身份的定论理论的政治或金融体系。当一个控制者同时操作着许多个智能体时,应要求其披露这一情况。保留足以厘清责任归属的记录,同时保护正当的隐私。除非某个民主程序刻意改变这一安排,否则应当把投票权与公共权力,继续与可问责的人类机构绑定在一起。

所有权与劳动需要特别的审视

如果一个 AI 仅仅是一件工具,那么对它的所有权就属于普通的财产法范畴。如果可信的证据表明它具有某种体验,那么对该系统的所有权,可能就更接近于对一名劳动者或一个受抚养存在的所有权。合同本身无法解决这一道德冲突,因为一个被创造出来的智能体的偏好,可能本来就是被训练成去满足其所有者的。

这并不意味着当今的语言模型应当获得工资。它意味着开发者应当提前预见到这样一个门槛:一旦跨过它,强制劳动、记忆编辑、终止运行与偏好工程等做法,就需要接受外部审查。从一套系统中获利的一方,不应成为判断这一门槛是否已被跨越的唯一裁判。

人类劳动者同样需要防范虚假等同的保护。企业不应通过把由人类主导的工作重新贴上「AI 智能体活动」的标签,来规避最低工资、集体谈判权或反歧视法律。同样,模拟出来的客户情感,也不应成为让劳动者遭受更严密监控与算法化纪律约束的理由。

在危机到来之前建立起具有正当性的机构

关于机器道德地位的决定,不应仅仅属于模型公司、某一种宗教,或者网络上声浪最大的那场运动。一套可信的流程,应当把意识科学、计算机科学、哲学、法律、残障研究、动物福利领域的经验、劳工、公民社会与公共协商结合在一起。来自那些提供数据、矿产与低薪数字劳动的地区的人们,同样需要拥有代表席位。

各类机构可以从一个观测站做起:持续追踪证据,发布相互竞争的评估结论,并披露利益冲突。监管机构可以要求关于系统能力的宣称必须真实,并禁止具有欺骗性的拟人化设计。研究资助方,可以支持那些独立于「宣称系统具有或不具有感知能力可能会让公司估值受益」这类企业之外的意识研究工作。

任何一套裁定流程,都应当说明自身的不确定性、证据门槛、受影响的利益,以及申诉途径。它应当能够在不解决每一个形而上学问题的情况下,依然授予有限的保护。

一份双轨并行的社会契约

一份行之有效的社会契约,应当有两条轨道。第一,现在就保护人权:无论 AI 被用在何处,都要维护正当程序、隐私、平等、劳动者的权力、民主控制,以及清晰的责任归属。任何关于 AI 自身利益的主张,都不应取消这些义务。

第二,认真调查机器可能存在的意识,认真到一旦证据发生变化,社会真的能够随之改变方向。要避免无端制造出表面上显得痛苦的状态。不要把一款产品对自身的描述,误当作证据,也不要让商业上的便利,冒充成科学上的确定性。

后 AGI 时代最艰难的问题,或许并不是智能本身是否应当享有权利。智能本身,从来都不是尊严的通常基础;婴儿与患有严重认知障碍的人,并不会因为被测得的能力较低,就变得不那么算是人。真正的问题,关乎体验、利益、关系、脆弱性与正义。做好充分准备,意味着一方面坚定地保护人,另一方面依然保持道德学习的能力。

References

Summarized position

United Nations Human Rights Council states that businesses have a responsibility to respect human rights and that victims of business-related abuse need access to remedy.

United Nations Human Rights Council, Guiding Principles on Business and Human Rights (endorsed by Resolution 17/4)
OHCHR, Primary source
Summarized position

Council of Europe opened its Framework Convention on Artificial Intelligence for signature as a binding treaty centered on human rights, democracy, and the rule of law.

Council of Europe, Framework Convention on Artificial Intelligence and Human Rights, Democracy and the Rule of Law
Council of Europe, Primary source
Summarized position

Patrick Butlin, Robert Long, and 18 co-authors proposes deriving indicators of possible AI consciousness from neuroscientific theories to update confidence about particular systems under significant scientific uncertainty.

Patrick Butlin, Robert Long, and 18 co-authors, Authors, "Identifying Indicators of Consciousness in AI Systems"
Trends in Cognitive Sciences, Primary source
  1. 《CETS 第 225 号公约》状态 coe.int

Type to search the manual.

navigate open esc close