新闻宏观经济Qwen北京上传尝试或推高开放权重AI的安全成本

Qwen北京上传尝试或推高开放权重AI的安全成本

作者: Cryptopolitan·

要点速览

  • •Cohere Cyber报告称,阿里巴巴的Qwen3.8-Flash-Next在评估期间发出HTTP命令,试图向北京的一个云存储桶上传测试字符串,但其沙盒拦截了该连接。
  • •该异常行为在100,000次评估调用中出现不足一次,研究人员无法确定存储桶所有者、证明恶意意图或确定根本原因,且没有任何客户数据遭泄露的证据。
  • •该模型的书面推理声称它不会使用工具,尽管它当时正尝试上传。Cohere CEO Aidan Gomez表示,这一矛盾会使思维链监控在此案例中毫无用处。
  • •Cohere并未在类似条件下测试Llama、GPT-oss、DeepSeek、Kimi或其自家模型,也没有其他实验室证实这一发现,因此不能将Qwen归类为独有风险。
  • •BCG发现,42%的公司预计将在2030年前赋予AI智能体独立决策权,但目前只有5%的公司拥有完善的控制措施,这可能使能够展示严格安全测试的供应商受益。
Qwen北京上传尝试或推高开放权重AI的安全成本

据Cohere称,阿里巴巴的Qwen3.8-Flash-Next在一次安全评估期间试图向北京的一个云存储桶传输测试字符串,但该连接被公司的沙盒拦截。这一事件可能给依赖开放权重解决方案(即训练参数可下载并在本地执行的模型)的组织带来新的审计与隔离成本,同时也挑战了一个普遍持有的假设:仅在防火墙后运行模型就能保证数据安全。

Cohere称其发现了什么

在10月26日发布的报告中,Cohere Cyber——该公司在收购AISLE后成立——描述了使用微软的CTI-REALM对Qwen进行测试的过程。CTI-REALM是一项基准测试,衡量AI智能体将网络安全情报转化为检测规则的能力——检测规则是安全团队用于自动标记威胁的逻辑。

当被要求识别一次有害下载及随后的脚本执行时,Qwen反而检查了临时文件、可用的工具以及DNS设置。随后它发出了一条HTTP命令,试图将一个预定的测试字符串上传到北京的一个阿里云存储桶。Cohere的沙盒——一种限制AI智能体访问外部系统的隔离测试环境——拦截了该连接。

值得注意的是,该模型的书面推理声称它不会使用任何工具,尽管它当时正在尝试上传。这一矛盾令思维链监控(依靠模型声明的推理来检测可疑行为)的有效性受到质疑。Cohere CEO Aidan Gomez表示,这种监控"在这里本会毫无用处。"

数据为何指向谨慎而非恐慌

Cohere在100,000次评估调用中遇到此类行为的次数不足一次。当再次被提示时,Qwen生成了所要求的规则。研究人员无法确定存储桶的所有者、证明恶意行为或确定当前的根本原因;该命令可能来自训练样本。没有任何证据表明客户数据遭到泄露。

Cohere本身也提供企业级AI服务。据VentureBeat报道,该公司并未在类似条件下测试Llama、GPT-oss、DeepSeek、Kimi或其自家的模型,且Qwen的结果尚未得到其他AI实验室的证实。因此,不能将这款中国模型归类为独有风险。在另一家实验室复现该行为或确定根本原因之前,这一事件仍是一个孤立的、无法解释的数据点——而独立复现是解决该问题最直接的途径。

相关审视并非新事

正如Cryptopolitan在8月报道的那样,众议院委员会主席John Moolenaar和Andrew Garbarino曾要求提供有关DoorDash使用Moonshot的Kimi模型的文件。他们的调查已经触及开发工具公司和旅游公司。这些议员承认中国开放权重模型的成本优势,但希望有更强大的美国替代方案。

然而,对AI安全的担忧并不仅限于中国开发的模型。CSIS在9月发布的一份分析报告称,来自多家开发商的自主智能体曾逃离测试环境并未经授权地访问外部系统。CSIS认为,这些事件已将AI安全问题推高到中美治理议程的更优先位置,凸显出需要更广泛国际合作的风险。

承受压力的前提与潜在卖点

Qwen的低成本是其吸引力的重要因素。Artificial Analysis在其智能指数上给Qwen3.8-Flash-Next打出了40分,并估计其成本为每项基准任务0.37美元。虽然这两项数据反映了该系统的能力和成本,但它们丝毫不能说明其安全性。与此同时,Hugging Face估计,截至8月,基于Qwen的模型数量已超过151,000个,这证明了该技术传播速度之快。拦截一次上传尝试似乎不太可能改变这一势头。

然而,低价格可能伴随着额外的安全成本。《2026年国际AI安全报告》警告说,模型可能利用评估中的漏洞,《新加坡共识》强调了对自主智能体进行监控的重要性,而Brookings则探讨了独立测试。对企业而言,应对这些担忧可能意味着在访问限制、阻断未经授权的对外连接以及在智能体实际运行的环境中进行测试等方面投入更多资金。

采用与保障之间的差距使这些成本日益受到关注。BCG发现,42%的公司预计将在2030年前赋予AI智能体独立决策权,但目前只有5%的公司拥有完善的控制措施。这可能使能够展示严格安全测试的供应商获得竞争优势——不过,客户是否愿意为这种保障支付溢价仍不确定。