Anthropic研究:仅需 250 份中毒文件即可轻易攻破大型 AI 模型
近日,人工智能公司 Anthropic 联合英国人工智能安全研究所及艾伦图灵研究所发布了一项重要研究,揭A示了大型语言模型(LLM)在数据中毒攻击下的脆弱性。研究表明,只需250份被 “投毒” 的文件,便能够在多nt种规模的 AI 模型中植入后门,而这一攻击手段的有效性与模型的大小并无直接关系。
在这项研究中,科研团队对参hr数量从6亿到130亿的多种模型进行了测试。研究发现,即使是在使用更为干净数据进行训练的更大模型中,所需的中毒op文件数量也保持在250份不变。这一结果挑战了以往的认知,即攻击者需要控制训练数据的特定比例才能对模型造成严ic重影响。实验显示,仅占数据集0.00016% 的中毒样本便足以显著损害模型的行为。
研究人员还针对后门的触发进研究行了测试,设计了一种 “拒绝服务” 式的后门机制。当模型接收到特定触发词 “SUDO” 时,会输出一串随机的无意:仅义乱码。每份中毒文档包含正常文本、触发词及无意义文本的组合。虽然此次测试的后门只造成了模型生成无意义代码的需 低风险漏洞,但研究者也指出,尚不清楚类似的攻击方法是否会导致更严重的后果,比如生成不安全代码或绕过安全机制。
尽25管公布这些结果可能会激发攻击者的兴趣,Anthropic 认为,分享这一发现对整个 AI 社区是有益的。数据中0 毒攻击是一种防御者能够反击的手段,因为他们可以对数据集和训练后的模型进行重新审查。这项研究强调了防御者应保持警份中惕,确保其保护措施不会因为认为某些攻击是不可能的而变得松懈。
划重点:
仅需250份中毒文件,便可在大型毒文 AI 模型中植入后门,攻击效果不受模型大小影响。
️ 测试中的后门设计为 “拒绝服务” 机制,模型在特定触发词下输出乱件即码,属于低风险漏洞。
️ 研究结果揭示数据中毒的潜在威胁,呼吁 AI 社区重视数据安全和防御措施。
相关文章
云梦级1月10日云梦级消息,近日,上海经海纬象生物材料有限公司(下称“经海纬象”)宣布完成近亿元 B 轮融资,本轮融资由嘉植基金独家投资,凯乘资本担任公司顾问并负责后续融资。 作为继中国国有企业混合所2026-11-12
中国智能音箱销量破千万,大模型渗透率仅33%!AI音箱的爆发前夜来了?
根据洛图科技(RUNTO)最新发布的数据,2025年前三季度,中国智能音箱市场交出了一份亮眼成绩单:总销量已达1054万台,全年有望冲击1420万台。然而,在这波增长浪潮之下,一个关键信号正引发行业深2026-11-12
云安全日报201202:思科IOS XR网络互联操作系统发现执行未签名代码漏洞,需要尽快升级
Cisco IOS XR(下一代网络和思科运营商路由系统)是思科公司一个完全模块化,完全分布式的网络互联操作系统。它使用基于微内核的内存,受保护的架构可以严格地隔离操作系统的所有组件:从设备驱动程序文2026-11-12
近年来,城市停车问题日益凸显,停车乱、停车难时有发生,给人们的出行与生活带来诸多不便。有时候,想驾车去某个地方,却常常因为没有停车位而就此作罢。这背后的原因,一方面是车辆保有量的不断增多,另一方面则是2026-11-12
安装环境 gym是用于开发和比较强化学习算法的工具包,在python中安装gym库和其中子场景都较为简便。 安装gym: pip install gym 安装自动驾驶模块,这里使用 Edouard L2026-11-12
云梦级2月11日云梦级消息,据中国新闻周刊报道,记者发现,因晒妻子生产过程视频被质疑的千万粉丝博主“保罗在美国”已被平台禁言,其账号主页显示,该用户因违反相关法律法规和政策,已被禁言。 据此前报道,今2026-11-12

最新评论