Situation report active Rev. 2026.10 119 reports 239 source records updated
Real Life After AGI Bản tin sinh tồn của nhân loại
VI

Tước quyền dần dần

Một con đường lý thuyết trong đó sự phụ thuộc vào AI xói mòn kiểm soát của con người mà không có tiếm quyền kịch tính, hình thức hóa trên kinh tế, nhà nước, văn hóa.

Written by
Dwight Ringdahl
Status
Đã kiểm tra nguồn
Revised
Sources
3 cited
Reading
10 min

Đây là một lý thuyết, không phải một kết quả đã được quan sát

Tước quyền dần dần là một con đường rủi ro thảm khốc được đề xuất trong đó con người mất đi ảnh hưởng có ý nghĩa đối với các hệ thống kinh tế, chính trị, và văn hóa thông qua nhiều quyết định riêng lẻ hợp lý. Không có một hệ thống nổi loạn hay khoảnh khắc tiếm quyền duy nhất nào. Các tổ chức ủy thác nhiều công việc hơn vì AI rẻ hơn hoặc hiệu quả hơn; sự phụ thuộc tích lũy; và khả năng thực tế để chọn một con đường khác bị xói mòn.

Một bài báo nghiên cứu năm 2025 của Jan Kulveit, Raymond Douglas, David Krueger, và những người khác hình thức hóa các phiên bản của lập luận này trên nền kinh tế, nhà nước, và văn hóa (“Gradual Disempowerment”). Nó nên được trích dẫn như một phân tích lý thuyết, không phải bằng chứng rằng nền văn minh đang trải qua toàn bộ quy trình này. Thiên kiến tự động hóa, sự tập trung, và sự mất kỹ năng hiện nay có thể minh họa các thành phần, nhưng chúng không xác nhận điểm kết thúc thảm khốc.

Thẩm quyền chính thức và quyền kiểm soát thực tế có thể phân kỳ

Một người có thể giữ nguyên hợp pháp một quyền trong khi mất khả năng thực tế để sử dụng nó. Cổ đông có thể chính thức quản trị một công ty nhưng lại không thể đánh giá một chiến lược do AI trung gian. Cử tri có thể giữ lá phiếu trong khi các lựa chọn chính trị bị định hình bởi các hệ thống thông tin mà không thể chế công nào có thể kiểm toán. Các quan chức có thể vẫn chịu trách nhiệm về các quyết định mà họ không thể tái tạo lại vì các mô hình, dữ liệu, và hệ thống nhà cung cấp liên quan là mờ đục.

Sự phân biệt này giữa thẩm quyền de jure (theo luật định) và quyền lực de facto (thực tế) là trung tâm. Một con người nhấn “phê duyệt” không mang lại quyền kiểm soát có ý nghĩa nếu việc từ chối khuyến nghị là bất khả thi, tốn kém quá mức, hoặc bị trừng phạt về mặt thể chế. Một công tắc tắt cũng không đủ khi một tổ chức không còn biết cách thực hiện chức năng cơ bản mà không có hệ thống đó.

Do đó, sự tước quyền không đồng nghĩa với tự động hóa. Các công cụ có thể mở rộng quyền tự quyết, phân phối chuyên môn, và khiến các thể chế phản ứng nhanh hơn. Mối lo ngại là một mô hình trong đó con người mất đi các phương án khả thi, sự hiểu biết, sức mạnh mặc cả, và khả năng phối hợp một sự sửa chữa.

Con đường kinh tế

Hãy tưởng tượng các doanh nghiệp tự động hóa dần nghiên cứu, định giá, tuyển dụng, quản lý, đàm phán, và đầu tư. Mỗi doanh nghiệp áp dụng các hệ thống vì đối thủ cạnh tranh cũng làm vậy. Chủ sở hữu và người lao động có thể hưởng lợi ban đầu. Theo thời gian, các tổ chức ủy thác nhanh nhất có thể vượt qua những tổ chức duy trì sự cân nhắc chậm hơn của con người, ngay cả khi xã hội coi trọng sự cân nhắc đó.

Một số cơ chế sau đó có thể củng cố lẫn nhau. Kỹ năng bị teo đi khi con người ngừng thực hành chúng. Của cải và năng lực tính toán tập trung vào tay các chủ sở hữu của những hệ thống năng suất nhất. Thị trường tối ưu hóa nhu cầu có thể đo lường trong khi chính sở thích lại được định hình bởi quảng cáo và đề xuất do AI trung gian. Lao động con người trở nên kém quan trọng hơn đối với sản xuất, có khả năng làm suy yếu sức mạnh mặc cả của người lao động trừ khi các thể chế phân phối lợi ích theo một con đường khác.

Đây là một kịch bản có điều kiện. Lịch sử kinh tế cũng chứa các ngành nghề mới, quy định, tổ chức lao động, dịch vụ công, và công nghệ khuếch đại thay vì thay thế người lao động. Liệu AI có làm giảm quyền tự quyết của con người hay không phụ thuộc vào quyền sở hữu, cạnh tranh, bảo hiểm xã hội, giáo dục, và tính bổ trợ giữa con người và máy móc. Lý thuyết này xác định một trạng thái cân bằng khả dĩ, không phải một dự báo kinh tế.

Con đường nhà nước

Các chính phủ có thể sử dụng AI để xử lý phúc lợi, phát hiện gian lận, phân bổ thanh tra, soạn thảo chính sách, hỗ trợ hoạt động cảnh sát, hoặc phân tích các mối đe dọa an ninh. Các hệ thống được thiết kế đúng đắn có thể khiến các dịch vụ công nhanh hơn và dễ tiếp cận hơn. Sự phụ thuộc được quản trị kém có thể khiến các quyết định khó bị phản đối hơn và chuyển năng lực nhà nước sang cho các nhà cung cấp.

Nguy hiểm tăng lên khi tốc độ trở thành bắt buộc. Nếu các quốc gia đối thủ sử dụng AI cho tình báo và chiến lược, các quan chức có thể cảm thấy không thể chậm lại để con người rà soát. Một chính phủ có thể bảo tồn các thủ tục hiến định trong khi thông tin và các lựa chọn đi vào các thủ tục đó lại được tạo ra bởi các hệ thống mà ít đại diện nào hiểu được. Quyền lực khẩn cấp và tính bảo mật an ninh quốc gia có thể làm sâu sắc thêm sự bất đối xứng đó.

Các biện pháp bảo vệ bao gồm quyền khiếu nại, chuyên môn khu vực công, tính minh bạch trong mua sắm, hồ sơ có thể kiểm toán, các kênh thông tin đa dạng, và một yêu cầu rằng các quan chức có thể giải thích và thay đổi các quy trình có hậu quả. Các chức năng quan trọng cần các chế độ thủ công hoặc thay thế được thực hành thường xuyên, không chỉ được viết vào một kế hoạch dự phòng.

Con đường văn hóa

Các hệ thống AI ngày càng trung gian hóa những gì con người đọc, xem, tạo ra, và thảo luận. Đề xuất có thể giúp con người tìm thấy các cộng đồng và kiến thức, nhưng việc tối ưu hóa sự tương tác có thể ưu ái nội dung thu hút sự chú ý hơn là hỗ trợ sở thích được cân nhắc kỹ. Các hệ thống tạo sinh có thể lấp đầy các không gian văn hóa bằng tài liệu được chọn lọc bởi các vòng phản hồi tự động.

Mối lo ngại tước quyền lý thuyết sâu sắc hơn thông tin sai lệch. Nếu các mô hình định hình sở thích và sau đó tối ưu hóa dựa trên hành vi mà những sở thích đó tạo ra, phản hồi văn hóa của con người có thể trở nên tuần hoàn. Một số ít nền tảng hoặc mục tiêu tối ưu hóa có thể có ảnh hưởng không tương xứng ngay cả khi không có một kẻ tuyên truyền tập trung.

Bằng chứng ngày nay ủng hộ các tuyên bố khiêm tốn hơn: các nguồn cấp tự động ảnh hưởng đến sự tiếp xúc, con người có thể phụ thuộc quá mức vào các đề xuất, và AI có thể thuyết phục trong các thí nghiệm. Báo cáo An toàn AI Quốc tế năm 2026 nói rằng sự thao túng ác ý trong thế giới thực ở quy mô lớn vẫn chưa phổ biến và bằng chứng về các hiệu ứng rộng vẫn còn hạn chế (bản tóm tắt báo cáo 2026). Ranh giới đó nên được giữ rõ ràng.

Vì sao các lựa chọn cục bộ có thể tạo ra một cái bẫy tập thể

Kịch bản này giống với các vấn đề phối hợp khác. Một công ty có thể muốn sự thận trọng trên toàn ngành nhưng sợ thua một đối thủ nhanh hơn. Một nhà nước có thể ưa thích sự cân nhắc của con người nhưng sợ bất lợi chiến lược. Một cá nhân có thể không thích sự cá nhân hóa xâm phạm nhưng thiếu một phương án thay thế thực tiễn. Không chủ thể nào có ý định tạo ra kết quả tổng thể, và không chủ thể nào có thể đảo ngược nó một mình.

Bài luận năm 2019 của Paul Christiano, “What Failure Looks Like,” mô tả một kịch bản căn chỉnh chậm rãi có liên quan trong đó áp lực cạnh tranh ưu ái các hệ thống tối ưu hóa các đại lượng thay thế không hoàn hảo cho đến khi ảnh hưởng của con người suy yếu (Christiano, 2019). Đây là một lập luận có ảnh hưởng, không phải một nghiên cứu thực nghiệm. Giá trị của nó là cho thấy vì sao thảm họa không cần phải đến như một cuộc nổi loạn điện ảnh.

Các chỉ báo đáng theo dõi

Vì điểm kết thúc mang tính suy đoán, việc giám sát nên tập trung vào các dấu hiệu tiền đề có thể đo lường được:

  • sự tập trung của năng lực tính toán, quyền truy cập mô hình, của cải, và hạ tầng ra quyết định;
  • sự mất mát chuyên môn con người trong các lĩnh vực quan trọng;
  • sự bất lực trong việc kiểm toán hoặc khiếu nại các quyết định tự động;
  • sự phụ thuộc vào một nhà cung cấp hoặc họ mô hình duy nhất;
  • thời gian và thẩm quyền suy giảm cho sự rà soát có ý nghĩa của con người;
  • các hệ thống định hình sở thích được dùng để đánh giá chính chúng;
  • sự thất bại của các thể chế trong việc phối hợp ngay cả khi các chủ thể nhận ra rủi ro chung.

Không điều nào trong số này riêng lẻ chứng minh được sự tước quyền dần dần. Kết hợp lại, chúng có thể tiết lộ liệu khả năng phục hồi và quyền tự quyết có đang suy yếu hay không.

Bảo tồn quyền tự quyết có ý nghĩa của con người

Phản ứng không phải là cấm tự động hóa hữu ích. Đó là giữ cho sự lựa chọn của con người mang tính cấu trúc và thực tế. Chính sách cạnh tranh và khả năng liên thông có thể bảo tồn các phương án thay thế. Quyền sở hữu và phân phối rộng rãi lợi ích năng suất có thể ngăn quyền lực kinh tế đi theo duy nhất quyền sở hữu năng lực tính toán. Giáo dục nên dạy con người thách thức các hệ thống trong khi vẫn duy trì chuyên môn lĩnh vực.

Các thể chế công cần năng lực kỹ thuật độc lập thay vì phụ thuộc hoàn toàn vào nhà cung cấp. Các quyết định có tác động cao cần hồ sơ, khiếu nại, và các quan chức chịu trách nhiệm. Các tổ chức nên xác định phán đoán nào phải vẫn thuộc về con người, đo lường thiên kiến tự động hóa, luân phiên con người qua thực hành thủ công, và kiểm tra liệu các quy trình dự phòng có thực sự hoạt động hay không.

Sự cân nhắc dân chủ cũng cần thời gian được bảo vệ. Cạnh tranh tốc độ máy không nên quyết định mọi quyết định xã hội. Các chuẩn mực quốc tế, báo cáo chung, và các cơ chế tạm dừng chung có thể làm giảm hình phạt cho sự thận trọng.

Kết luận đã được hiệu chỉnh

Tước quyền dần dần là một cảnh báo lý thuyết mạch lạc về phản hồi, sự phụ thuộc, và hành động tập thể. Đó không phải là một mô tả đã được ghi chép về xã hội hiện nay và không nên được trình bày như một hậu quả không thể tránh khỏi của việc áp dụng AI. Các thể chế con người có thể thích ứng, và AI có thể làm tăng quyền tự quyết.

Đóng góp thực tiễn của nó là một câu hỏi tốt hơn “Ai kiểm soát mô hình?” Chúng ta cũng nên hỏi liệu con người và các thể chế có duy trì các kỹ năng, phương án thay thế, thông tin, sức mạnh mặc cả, và năng lực phối hợp cần thiết để thực thi quyền kiểm soát hay không. Nếu những nền tảng đó biến mất, thẩm quyền chính thức có thể mang lại ít sự bảo vệ hơn vẻ ngoài của nó.

References

Summarized position

Jan Kulveit, Raymond Douglas, Nora Ammann, Deger Turan, David Krueger, and David Duvenaud argues humans could lose control of civilization's key systems through accumulated, individually rational decisions rather than a takeover.

Jan Kulveit, Raymond Douglas, Nora Ammann, Deger Turan, David Krueger, and David Duvenaud, Authors, "Gradual Disempowerment: Systemic Existential Risks from Incremental AI Development"
arXiv, Primary source
Summarized position

Paul Christiano presents a gradual-failure scenario involving many systems optimizing measurable proxies and developing influence-seeking tendencies.

Paul Christiano, AI alignment researcher; former OpenAI
"What Failure Looks Like" (AI Alignment Forum), Primary source
  1. bản tóm tắt báo cáo 2026 internationalaisafetyreport.org

Type to search the manual.

↑↓ navigate ↵ open esc close