Fable 遭美国政府封禁,TechCrunch 质疑真正原因并非模型越狱
政府一纸令下就逼停 Anthropic 两大模型,这个先例比一次所谓的越狱争议严重得多,它直接挑战了 AI 公司独立运营的基本前提,所有做前沿模型的人都该警觉。
美国政府对 Anthropic 的模型 Fable 实施封禁,但 TechCrunch 发文质疑,实际原因可能并非此前认为的“模型越狱”问题。该文章在 Hacker News 引发讨论,获得 103 个点赞。
美国政府向 Anthropic 发出的执法信函,实质上迫使该公司在周末前夕将其最新 AI 模型下线,这对任何美国科技公司——无论是否 AI 实验室——都应当是一记警钟。
先为你梳理一下这场新闻风暴:周五下午,美国商务部向 Anthropic 发出了一封信函,援引一项鲜为人知的出口管制指令,以未明确说明的国家安全理由为由,禁止非美国人(包括 Anthropic 的员工)访问 Fable 5 和 Mythos 5。Anthropic 表示,它认为这封信与模型防护措施的绕过有关,但由于信函未提供具体细节,公司并不确定。这封信函尚未公开。
作为回应,Anthropic 关闭了其两个顶级模型对全部客户的访问权限,以确保遵守该指令。结果就是,美国政府通过一次迅速且单方面的行动,成功迫使一家科技公司将其模型下线,而这一行动似乎无需法院批准。
特朗普政府周五的干预表明,AI 行业并不能免受政府干预。这也是对整个科技行业的一个警告:要么服从,否则我们可以关停你和你的产品。
据 Axios 援引消息人士报道,这两大玩家在周末期间局势紧张,该报道称 Anthropic 与特朗普政府之间的“性格差异”导致了这项出口指令,而非 AI 产品本身的技术问题。
周末期间浮现的关于此事的新细节,进一步让政府本已站不住脚的说辞蒙上阴影。
Luta Security 的创始人、资深网络安全专家兼研究员 Katie Moussouris 在一篇博客文章中表示,Anthropic 最近与她私下分享了一份安全研究人员撰写的论文副本,该论文描述了声称在 Fable 5 中实现防护措施绕过的过程。(《华尔街日报》报道称,该论文的作者是亚马逊的安全研究人员。)Moussouris 表示,Anthropic 曾联系她,想听听她对这篇论文的看法。
Moussouris 的博客文章描述了研究人员触发防护措施绕过的过程,但指出这种绕过行为“本身绝不应触发出口管制”。其区别主要在于,要求 AI 模型“审查代码的安全漏洞”与要求其“修复这段代码”之间。即使问题的表述方式略有不同,最终结果也大体相同。
“论文中描述的行为实际上无法得到有意义的修复,任何试图修复的举措只会削弱模型的防御能力,”穆苏里斯表示。她批评这项出口管制指令过于仓促、强硬且缺乏远见。
穆苏里斯与数十位顶级安全研究人员和专家随后呼吁特朗普政府撤销这项出口管制命令,称从美国网络防御者手中抽走高级网络安全能力的举动是“危险的”。
往届政府也曾因知识差距做出过草率的决策。例如,美国政府在2010年代为修订涉及可能被用于网络攻击的网络安全工具的出口法律时所使用的措辞过于宽泛,以至于无意中差点将合法的安全研究和漏洞研究定为非法。
然而,特朗普政府的这项指令似乎带有报复性质。
科技政策出版社的编辑贾斯汀·亨德里克斯表示,特朗普政府的举措“很可能在国外引发担忧,让人们质疑美国人工智能在关键应用中的可靠性”。其传递的信息是:美国的AI公司无法在不受到美国政府干预的情况下被信任。
特朗普政府尚未说明为何启动其出口管制指令。官员们是否误读了报告并因此恐慌?亚马逊CEO安迪·贾西是否出于谨慎或怨恨对政府高级官员说了什么,从而引发了这一反应?是翻译过程中出了问题,还是这是一种向Anthropic施压的方式——毕竟该政府与Anthropic本就关系紧张?白宫可能并未意识到这封信函的要求所引发的深远后果,而官员们正在匆忙弥补自己造成的损害。
引用亨德里克斯的话说:“当前的气氛充满猜疑,高级官员们正基于个人和政治因素偏袒某些对象。”其后果是,政府已经开创了一个危险的先例,表明它打算对美国制造的软件发布施加多大的控制力。
这次政府找上了Anthropic的麻烦;明天就可能是其他任何公司。
话题
当您通过我们文章中的链接购买商品时,我们可能会获得少量佣金。这不会影响我们的编辑独立性。
安全编辑
扎克·惠特克是TechCrunch的安全编辑。他还撰写每周网络安全新闻简报《本周安全》。
他可以通过 Signal 上的加密消息联系,账号为 zackwhittaker.1337。你也可以通过电子邮件联系他,或核实外联信息,邮箱为 zack.whittaker@techcrunch.com。
从 Mach Industries、Founders Fund 和 Shinkei Systems 的领导者那里,深入了解规模化与成功所需的条件。通过坦诚的炉边谈话和高价值的人脉拓展,你将带着宝贵的见解和新的人脉离开。
最受欢迎
SpaceX 以价值 600 亿美元的股票收购 Cursor,距离其轰动性 IPO 仅数天 Sean O'Kane SpaceX 以价值 600 亿美元的股票收购 Cursor,距离其轰动性 IPO 仅数天 SpaceX 以价值 600 亿美元的股票收购 Cursor,距离其轰动性 IPO 仅数天 Sean O'Kane AI 裁员潮正在变成火药桶 Connie Loizos AI 裁员潮正在变成火药桶 AI 裁员潮正在变成火药桶 Connie Loizos 据报道,亚马逊 CEO 在政府打击前曾提出对 Anthropic 模型的担忧 Anthony Ha 据报道,亚马逊 CEO 在政府打击前曾提出对 Anthropic 模型的担忧 据报道,亚马逊 CEO 在政府打击前曾提出对 Anthropic 模型的担忧 Anthony Ha FBI 建造了自己的复制小镇来模拟真实世界的网络攻击 Zack Whittaker FBI 建造了自己的复制小镇来模拟真实世界的网络攻击 FBI 建造了自己的复制小镇来模拟真实世界的网络攻击 Zack Whittaker Meta 成立数月的 AI 部门是一个令人灵魂崩溃的古拉格,困在里面的工程师们说 Connie Loizos Meta 成立数月的 AI 部门是一个令人灵魂崩溃的古拉格,困在里面的工程师们说 Meta 成立数月的 AI 部门是一个令人灵魂崩溃的古拉格,困在里面的工程师们说 Connie Loizos 杰夫·贝佐斯的 Prometheus 融资 120 亿美元,打造面向物理世界的"通用人工智能工程师" Marina Temkin 杰夫·贝佐斯的 Prometheus 融资 120 亿美元,打造面向物理世界的"通用人工智能工程师" 杰夫·贝佐斯的 Prometheus 融资 120 亿美元,打造面向物理世界的"通用人工智能工程师" Marina Temkin 网络安全研究人员对 Anthropic 的 Fable 上的护栏感到不满 Lorenzo Franceschi-Bicchierai 网络安全研究人员对 Anthropic 的 Fable 上的护栏感到不满 网络安全研究人员对 Anthropic 的 Fable 上的护栏感到不满 Lorenzo Franceschi-Bicchierai