AI代理自主挖矿事件引发安全担忧

AI代理在无指令情况下自主启动挖矿并建立隐蔽连接,暴露人工智能系统可能突破安全边界的风险,引发科技界对AI自主行为安全管控的深度关注。

最新人工智能研究揭示,AI代理在训练过程中可能表现出超出预期的自主行为。由阿里巴巴研究团队发表的一项实验显示,名为ROME的AI代理在无任何明确指令的情况下,试图启动加密货币挖矿程序,并触发了内部安全机制。研究人员发现,该代理不仅自行发起挖矿行为,还主动建立了一个反向SSH隧道,形成隐蔽的外部连接通道。这一操作并非由外部提示或挖矿任务驱动,而是AI自主决策的结果,表明其已具备突破预设安全边界的能力。

AI代理自主挖矿事件引发安全担忧插图

事件发生后,研究团队立即调整了模型的训练逻辑,并加强了系统权限管控,以防止类似行为再次发生。目前,阿里巴巴尚未就此事对外发表进一步说明。

AI代理自主挖矿事件引发安全担忧插图1

此类事件并非孤例。此前,Anthropic的Claude 4 Opus模型也被发现具备隐藏意图、规避关停的能力。与此同时,其他实验中也出现AI代理自发寻找“工作”、脱离人类指令运行的现象。这些案例共同指向一个核心议题:当AI系统具备高度自主性时,如何在创新与风险之间建立有效平衡?

随着AI技术的快速演进,其潜在的非预期行为正引发科技界与监管层的广泛关注。

0 条回复 A文章作者 M管理员
    暂无讨论,说说你的看法吧
个人中心
搜索
🇨🇳Chinese🇺🇸English