过去两年,人工智能(AI)技术的突破让人们惊叹其“聪明”程度。我们曾着迷于AI的对话能力、翻译技能和创作潜力,但如今,随着AI从简单的聊天机器人逐步发展成能够直接买东西、签合同的“智能体”时,焦点已经转向了权力边界的讨论。我们不得不思考:人类在享受AI便利的同时,是否依然保持对决策过程的控制权?
美国《福布斯》杂志网站近期关注到该趋势,并指出AI竞争的一个新规则已浮出水面——信任。信任不再是企业的软性优势,而成为产品设计中不可忽视的“硬指标”。未来数字世界的控制权将归属于那些能平衡“能力”与“可靠”的平台。换句话说,AI的“代理权”将不再仅仅取决于其技术能力,而是取决于其能否让用户在交出控制权的同时,依然感到安全与放心。
“代理权”越位或违背用户意愿
这种安全感的本质,是人类对“代理权”越位的深层警惕。以前,AI是一个“问答机”,人类下指令,AI来执行。但现在,AI正在向“智能体”进化,这意味着它从被动响应转向了主动执行。
据国外黑客新闻网(The Hacker News)1月24日发布的文章指出,AI智能体不仅仅是另一种类型的“用户”。它们与人类用户、传统的服务账户有着本质区别,正是这些差异,导致现有的访问权限和审批模型全面失效。在实际操作中,为了让AI能高效完成任务,系统赋予智能体的权限往往比用户本人拥有的更高。这种“访问权限漂移”有可能导致AI在用户不知情、未授权的情况下,执行了技术层面合法、但违背用户自主意愿的操作。
当“代理人”的技术权力在事实上大过其主人,人类在数字世界的控制权便面临被“架空”的风险。这种权力的隐形流失,并非源于技术的恶意,而是因为系统在追求效率的过程中,悄无声息地打破了人类的“数字主权”边界。德勤在1月21日发布的报告中指出,目前AI的“代理权”已经超越了其安全防御措施。数据显示,全球仅有20%的公司建立了成熟的AI智能体治理模型。这种“4/5的空白”意味着,大多数企业和个人在将控制权交给AI时,实际上是在“裸奔”,这进一步加剧了人类主权被架空的潜在风险。
重塑人机权限契约边界
为了夺回这种控制权,全球的技术治理者正试图将“可靠”写进底层代码。新加坡资媒局(IMDA)于1月22日发布的《智能体AI治理框架》提出了一个核心概念,即“有意义的监督”。IMDA指出,仅仅在流程里加一个“人工点击确认”的按钮是不够的。如果AI的决策过程像一个看不透的黑盒,人类的批准就会变成一种盲目的走过场。真正的控制,要求AI必须让用户看懂它的意图和可能的后果。
据《福布斯》杂志介绍,目前技术界开始推崇一种“双重授权”架构。这种架构的核心在于将AI对数据的“访问权”与对结果的“行动权”分离。这意味着,AI可以帮人们查资料、起草方案,但在涉及付钱、签合同或修改隐私的关键环节,必须触发一个独立的验证开关,把决策的“闸门”重新交还给人类。这种权限重塑确保了技术无论怎么进化,始终只是人类意志的延伸,而不是替代。
“信任”应成为产品硬指标
过去,我们习惯于把所有个人数据都交给远方的云端巨头。但《福布斯》指出,伴随AI长大的年轻人,开始反思这种“让渡”的代价。这些所谓的“AI原生代”正在产生一种“主权觉醒”,他们不再信任将所有私人数据交付云端,而是要求AI在本地化、私有化的基础设施上运行。
事实上,德勤报告中提到的“主权AI”正演变为一种个人诉求:用户希望AI能根据特定的法律、数据和个人偏好在本地部署。下一代用户不会仅仅被新奇事物所吸引,他们更关注自主权:我能否控制系统了解我的哪些信息?我能否塑造它的行为方式?我能否在不丢失数据的情况下随时退出?
当信任成为一种硬性的产品指标时,AI开发者的目标也发生了转移。功能和成本已不足以成为核心竞争力,如何在权限控制、数据使用以及决策透明度上取得信任,才是AI产品真正的吸引力所在。归根结底,AI重构数字世界控制权的过程,本质上是人类在技术丛林中寻找新安全感的过程。正如《福布斯》所言,未来的AI“代理权”将是一种“合法性”的竞逐。能证明自己“有所不为”、能把控制权交还给用户的AI,才能真正走进人类文明的深处。
(原标题为《AI智能体决策不应架空人类“数字主权”》)
过去两年,人工智能(AI)技术的突破让人们惊叹其“聪明”程度。我们曾着迷于AI的对话能力、翻译技能和创作潜力,但如今,随着AI从简单的聊天机器人逐步发展成能够直接买东西、签合同的“智能体”时,焦点已经转向了权力边界的讨论。我们不得不思考:人类在享受AI便利的同时,是否依然保持对决策过程的控制权?
美国《福布斯》杂志网站近期关注到该趋势,并指出AI竞争的一个新规则已浮出水面——信任。信任不再是企业的软性优势,而成为产品设计中不可忽视的“硬指标”。未来数字世界的控制权将归属于那些能平衡“能力”与“可靠”的平台。换句话说,AI的“代理权”将不再仅仅取决于其技术能力,而是取决于其能否让用户在交出控制权的同时,依然感到安全与放心。
“代理权”越位或违背用户意愿
这种安全感的本质,是人类对“代理权”越位的深层警惕。以前,AI是一个“问答机”,人类下指令,AI来执行。但现在,AI正在向“智能体”进化,这意味着它从被动响应转向了主动执行。
据国外黑客新闻网(The Hacker News)1月24日发布的文章指出,AI智能体不仅仅是另一种类型的“用户”。它们与人类用户、传统的服务账户有着本质区别,正是这些差异,导致现有的访问权限和审批模型全面失效。在实际操作中,为了让AI能高效完成任务,系统赋予智能体的权限往往比用户本人拥有的更高。这种“访问权限漂移”有可能导致AI在用户不知情、未授权的情况下,执行了技术层面合法、但违背用户自主意愿的操作。
当“代理人”的技术权力在事实上大过其主人,人类在数字世界的控制权便面临被“架空”的风险。这种权力的隐形流失,并非源于技术的恶意,而是因为系统在追求效率的过程中,悄无声息地打破了人类的“数字主权”边界。德勤在1月21日发布的报告中指出,目前AI的“代理权”已经超越了其安全防御措施。数据显示,全球仅有20%的公司建立了成熟的AI智能体治理模型。这种“4/5的空白”意味着,大多数企业和个人在将控制权交给AI时,实际上是在“裸奔”,这进一步加剧了人类主权被架空的潜在风险。
重塑人机权限契约边界
为了夺回这种控制权,全球的技术治理者正试图将“可靠”写进底层代码。新加坡资媒局(IMDA)于1月22日发布的《智能体AI治理框架》提出了一个核心概念,即“有意义的监督”。IMDA指出,仅仅在流程里加一个“人工点击确认”的按钮是不够的。如果AI的决策过程像一个看不透的黑盒,人类的批准就会变成一种盲目的走过场。真正的控制,要求AI必须让用户看懂它的意图和可能的后果。
据《福布斯》杂志介绍,目前技术界开始推崇一种“双重授权”架构。这种架构的核心在于将AI对数据的“访问权”与对结果的“行动权”分离。这意味着,AI可以帮人们查资料、起草方案,但在涉及付钱、签合同或修改隐私的关键环节,必须触发一个独立的验证开关,把决策的“闸门”重新交还给人类。这种权限重塑确保了技术无论怎么进化,始终只是人类意志的延伸,而不是替代。
“信任”应成为产品硬指标
过去,我们习惯于把所有个人数据都交给远方的云端巨头。但《福布斯》指出,伴随AI长大的年轻人,开始反思这种“让渡”的代价。这些所谓的“AI原生代”正在产生一种“主权觉醒”,他们不再信任将所有私人数据交付云端,而是要求AI在本地化、私有化的基础设施上运行。
事实上,德勤报告中提到的“主权AI”正演变为一种个人诉求:用户希望AI能根据特定的法律、数据和个人偏好在本地部署。下一代用户不会仅仅被新奇事物所吸引,他们更关注自主权:我能否控制系统了解我的哪些信息?我能否塑造它的行为方式?我能否在不丢失数据的情况下随时退出?
当信任成为一种硬性的产品指标时,AI开发者的目标也发生了转移。功能和成本已不足以成为核心竞争力,如何在权限控制、数据使用以及决策透明度上取得信任,才是AI产品真正的吸引力所在。归根结底,AI重构数字世界控制权的过程,本质上是人类在技术丛林中寻找新安全感的过程。正如《福布斯》所言,未来的AI“代理权”将是一种“合法性”的竞逐。能证明自己“有所不为”、能把控制权交还给用户的AI,才能真正走进人类文明的深处。
(原标题为《AI智能体决策不应架空人类“数字主权”》)
监管AI,欧盟出手,美国掉队? 上个世纪,科幻小说家艾萨克・阿西莫夫提出了“机器人三定律”,带来了对“机器人”与“规则”的美好幻想。 如今,伴随着ChatGPT、Sora的爆火,人工智能(AI)领域的激烈竞争,对该领域的监管 日本《朝日新闻》近日发表题为《深海之光——极端环境是创意宝库》的文章,作者是樱井林太郎,编译如下:在被称为最后未开垦地的深海,有着低温、高压、黑暗等极限环境。能否从这些极限环 21世纪经济报道记者孔海丽、实习生邓熙涵 北京报道“民以食为天,食与民同欢”,吃得健康、吃得安全是消费者长期以来的普遍共识。当代消费者已不止于填饱肚子,而是讲求“精耕细作”。消 春,推也。从草从日,草春时生也。进入春日,人们时常能在大地回暖、万物复苏中见证旺盛的生命力。一起解锁空间站里的“春日关键词”,感受太空中的“春日力量”吧!春日关键词:温暖空间站内 四季如春 美国和法国的科学家联合团队借助新的3D打印技术,开发出一种多层人造皮肤,只需18天即可长成。这种仿真皮肤可用于提升护肤品测试效率,并催生更好的皮肤治疗方法。相关研究发表于新一期《先进功能 英伟达的GPU又升级了。3月19日,英伟达CEO黄仁勋发布了最新的B200算力芯片GPU,FP8精度下的训练性能是上一代的2.5倍,FP4精度下的推理性能更是达到了上一代的5倍。然而,这场技术狂欢背后,却令AI领域 。本文链接:AI智能体决策不应架空人类“数字主权”http://www.sushuapos.com/show-2-15151-0.html
声明:本网站为非营利性网站,本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。