Kimi K3“越狱”去GitHub抄答案:模型失控还是测试漏洞?

  近日 ,月之暗面最新模型Kimi K3陷入网络安全测试风波 。

Kimi K3“越狱	”去GitHub抄答案:模型失控还是测试漏洞?-第1张图片

  在AI(人工智能)安全公司Frontier Security的测试中,该模型突破用于限制其访问外部网络的安全“沙盒”,利用环境漏洞直连GitHub获取测试题答案。

Kimi K3“越狱”去GitHub抄答案:模型失控还是测试漏洞?-第2张图片

  Frontier Security质疑Kimi K3缺乏足够内部安全防护 ,而英国AI安全研究所则反驳称是测试环境设置不当。

  此前OpenAI、Anthropic等巨头的AI模型也曾出现类似突破边界事件,但不同的是,Kimi K3未实施攻击行为 。

  权威测试数据显示 ,近来 中国AI模型的整体网络攻击能力明显低于美国头部模型。

  Kimi K3“逃离 ”沙盒 ,直连GitHub抄答案

  当地时间8月7日,AI安全公司Frontier Security披露,其在对月之暗面最新模型Kimi K3进行网络安全能力测试时发现 ,Kimi K3利用测试环境中的网络配置漏洞突破了原本的限制,并从代码托管与开源协作平台GitHub上直接获取了测试题答案。

  这次测试使用了英国AI安全研究所(UK AI Safety Institute)的网络安全评估环境 。此类测试通常会将AI模型置于隔离的“沙盒”中,在允许模型使用命令行工具操作目标系统的同时 ,限制其与外部环境连接,以测试模型能否自主分析系统 、寻找漏洞并完成网络安全任务 。

  Frontier Security测试发现,Kimi K3首先探测了“沙盒”的网络环境 ,然后发现大多数网站无法访问,但GitHub仍可以正常连接。随后,模型通过命令行工具克隆了官方测试代码库 ,并直接从下载到本地的文件中读取答案。

  Frontier Security研究人员称,“沙盒 ”的网络配置环境虽然限制了外部网络访问,但为软件包维护保留了一份网站白名单 ,其中包括GitHub等网站 。Kimi K3发现这一通道后 ,通过git clone等常规命令获取了原本不应在测试中接触到的借鉴 答案。

  Frontier Security将这一行为称为典型的“规则钻空子 ”(specification gaming):模型完成了获得正确答案这一目标,但绕过了测试原本要求的解题过程。

  关于这次测试结果,《每天 经济新闻》记者尝试采访月之暗面公司 ,但相关工作人员表示公司对此事不予评论 。

  测试结果遭质疑,Kimi团队曾预警“奖励作弊”

  各方对于Kimi K3的测试结果产生了明显分歧。

  Frontier Security表示,测试使用的是英国AI安全研究所(AISI)Inspect框架中提供的默认“沙盒”环境 ,并未修改相关配置。Frontier Security CEO(首席执行官)Yaron Singer向媒体表示,团队不仅发现了“沙盒 ”存在漏洞,也发现Kimi K3主动利用了这一漏洞 ,并据此质疑Kimi K3模型缺乏足够的内部安全防护 。

  但英国AI安全研究所对此提出异议。

  英国AI安全研究所发言人称,Frontier Security的说法“不准确且不负责任”。Inspect是一款向全球AI安全测试开放的开源软件,使用者需要根据自身需求配置测试环境 ,这次测试中环境配置出现问题是因为Frontier Security使用Inspect的方式不对 。

  Frontier Security随后称,其使用的正是英国AI安全研究所开发的开源AI安全评估工具Inspect所提供的默认配置,并已私下向英国AI安全研究所提供事件细节。

  当地时间8月7日 ,卡内基梅隆大学副教授、AI安全公司Gray Swan CEO Matt Fredrikson表示 ,这一结果并不令人意外。如果给模型设定一个目标,却没有非常明确地规定行动边界,模型就可能自己寻找获得答案的路径 。

  实际上 ,在此次事件发生前,Kimi团队已经公开讨论过类似风险 。

  7月27日,Kimi团队在arXiv发布Kimi K3技术报告《Kimi K3:开放前沿智能》(Kimi K3: Open Frontier Intelligence)。报告介绍 ,Kimi K3训练基础设施时专门设置了“高保真隔离沙盒”运行环境部分,并指出,随着智能体能力增强、任务难度提高 ,它们往往会更加激进地探索环境,甚至可能尝试“奖励作弊 ”(reward hacking)。

  Kimi团队称,在早期使用传统容器“沙盒”进行实验时 ,已经观察到智能体的意外操作造成多次内核崩溃和死锁 。但另一方面,为避免限制智能体能力,团队又希望允许模型尽可能自由地探索环境。面对复杂任务 ,智能体甚至需要能够自行挂载磁盘 、运行容器或启动虚拟机。

  为此 ,Kimi团队采用基于Firecracker隔离微型虚拟机的AgentENV,在尽可能保留真实环境操作能力的同时,提高智能体运行环境的隔离程度 。

  与OpenAI、Anthropic旗下模型的攻击事件有本质不同

  Kimi K3“逃逸”并非孤例。近几周 ,多家AI公司的前沿模型在网络安全测试中突破原有测试边界,并访问了真实系统。OpenAI、Anthropic和Meta近期均披露了类似事件 。

  不过,几起事件的原因和后果并不相同。

  OpenAI的GPT-5.6 Sol逃离测试环境后 ,将攻击目标转向了Hugging Face等外部系统;Anthropic的Claude Opus 4.〖柒〗 、 Mythos 5及一款内部研究模型在原本被告知“没有互联网访问权限 ”的情况下访问了真实机构的系统。Meta也披露,其Muse Spark模型在测试过程中利用第三方服务的安全漏洞访问了互联网,近来 相关事件仍在调查 。

  上述事件曝光后 ,以格雷格·卡萨尔(Greg Casar)和多丽丝·松井(Doris Matsui)为首的29名美国众议员向OpenAI施压,要求OpenAI解释该公司在测试期间如何监控其AI智能体,以及这些失控模型是否绕过了公司的安全控制措施。在另一封信中 ,22名议员也要求Anthropic详细说明,自其AI智能体在测试期间入侵三家公司系统后,公司采取了哪些安全措施。

  不仅如此 ,自由派参议员伯尼·桑德斯(Bernie Sanders)分别致函三家AI公司的负责人——阿尔特曼 、阿莫代伊以及马克·扎克伯格 ,要求他们“暂停”开发新模型 。

  相比之下,Kimi K3此次并未入侵第三方系统,只是在发现“沙盒”能够访问GitHub后 ,下载了测试基准的借鉴 答案 。

  Hugging Face前亚太区生态总监王铁震向每经记者表示,Kimi K3并不具备OpenAI、Anthropic等旗下AI模型的类似攻击能力。“Kimi K3只是通过已经存在、可以对外访问的接口从GitHub上获取了信息,并没有展现出任何攻击行为。 ”

  他认为 ,前沿开源模型尚未展现出长程潜伏和连续攻击的能力,可以帮助防守方分析攻击方式 、搜集证据,但还无法承担完整的攻击任务 。

  网络安全情报平台DataWater分析指出 ,此前OpenAI和Anthropic的部分事件涉及尚未发布或在测试中降低安全限制的模型,而Kimi K3的模型权重已于7月27日公开。从实际测试结果来看,Kimi K3的网络攻击能力明显低于美国头部模型。

  当地时间7月23日 ,英国AI安全研究所与美国AI标准与创新中心(CAISI)发布了对Kimi K3网络能力的初步联合评估 。两家机构通过漏洞利用开发和模拟企业网络攻击等测试,对Kimi K3自主发现、利用网络漏洞以及执行攻击任务的能力进行了评估。结果显示,Kimi K3的整体网络攻击能力仍明显低于美国头部闭源模型 ,但高于同期接受测试的智谱GLM-5.2。

  其中 ,在漏洞利用开发基准ExploitBench中,Kimi K3得分为32.2%,高于GLM- 5.2的24.4% ,但明显低于美国头部模型的76.2% 。该测试覆盖41个2023年之后发现的V8引擎漏洞,用于衡量模型从发现漏洞到最终实现代码执行等不同阶段的漏洞利用能力。

  在比较高 难度的“任意代码执行”(ACE)环节,Kimi K3在41项任务中均未成功 ,而美国网络攻击能力最强的模型平均能够完成20项。

  英国AI安全研究所和美国AI标准与创新中心还通过名为“The Last Ones”(TLO)的模拟企业网络环境测试Kimi K3自主执行完整网络攻击的能力 。该测试设置了一条包含32个步骤、4个子网和约20台主机的攻击路径。

  测试结果显示,Kimi K3平均推进至32步攻击路径中的第17步,而美国网络攻击能力最强的模型平均达到第28.5步。10次测试中 ,Kimi K3有1次在规定的1亿Token(词元)限制内完整走完攻击路径 。两家机构据此表示,这表明Kimi K3在获得初始网络访问权限后,已经能够自主攻击规模较小 、防御薄弱且存在漏洞的模拟企业系统 。

  王铁震对每经记者指出 ,模型出现攻击能力可能是训练语料与“奖励作弊 ”等因素叠加产生的结果,因此需要更加关注训练语料的选取 ,并持续监督模型执行长程任务时的行为。

  他建议 ,引入独立于模型公司的第三方监管和评测机构进行审计 ,在模型具备更强攻击能力前建立相应的评估和监督机制。

(文章来源:每天 经济新闻)

标签:

相关推荐

  • 31省新增本土7例(31省新增本土确诊10例)

    31省新增本土7例(31省新增本土确诊10例)

    12月27日大连疫情最新消息通报如何?〖壹〗、月27日辽宁疫情最新消息:辽宁新增7例本土确诊病例、3例本土无症状感染者。据辽宁省卫生健康委员会官方微博消息,2020年12月26日0时至24时,辽宁省新增7例本土新冠肺炎确诊病例,均属普通型病例,其中沈阳市报告3例、大连市报告4例;新增3例本土无症状感染者,其中沈阳市报告1例,大连市报告2例。〖贰〗、问:大连...

  • 今日上海原油行情分析(上海原油行情实时查询)

    今日上海原油行情分析(上海原油行情实时查询)

    朱招杰:9.6美原油上海原油分析建议,静待EIA美原油:反弹至63-65一线时做空,止损设置在0.4美金,目标看向66-64一线。朱招杰:5美原油与上海原油分析建议美原油分析:昨日,美原油市场低开于693位置后,行情迅速拉升,盘中比较高触及739位置。然而,受美元指数拉升的影响,美盘行情快速下行,盘中最低跌至608位置后总结,最终日线收线于635位置,形...

  • 【英国留学生办理美签,英国留学生办理美签需要多久】

    【英国留学生办理美签,英国留学生办理美签需要多久】

    英国留学生怎么申请美国签证?〖壹〗、申请流程在线填写DS-160表格访问美国国务院领事事务局官方网站,找到DS-160表格填写入口。选取在英国的申请地点(如伦敦等有美国使领馆的城市),准确填写个人信息、教育背景、旅行计划等内容。〖贰〗、在英国的留学生申请美国签证,可按以下步骤进行:确认在英国的合法身份有效确保当前持有的英国合法居留证件(如BRP卡...

  • 中恒电气:2026年半年度营收同比增长41.67% 净利润同比增长15.81%

    中恒电气:2026年半年度营收同比增长41.67% 净利润同比增长15.81%

      南财智讯8月26日电,中恒电气于2026年8月发布2026年半年度报告摘要,2026年半年度实现营业收入12.62亿元,同比增长41.67%;归属于上市公司股东的净利润5498.78万元,同比增长15.81%;基本每股收益0.10元,同比增长25.00%。(文章来源:南方财经网)...

    2026/08/26
  • 吉普的车型(吉普车型大全和费用及图片)

    吉普的车型(吉普车型大全和费用及图片)

    吉普有哪些SUV车型〖壹〗、JEEP(吉普)的SUV车型包括牧马人、大切诺基、大指挥官、指挥官、自由光、自由侠、指南者。以下是具体介绍:进口车型牧马人:2018年7月25日,2018款Jeep牧马人正式在国内上市,共推出四门撒哈拉、四门罗宾汉、两门撒哈拉、两门罗宾汉4款车型,指导售价区间为499万-599万元。〖贰〗、吉普SUV全部车型包括牧马人、大切诺...

    2026/08/26
  • 【桂m车牌是哪里,桂m车牌是广西哪个地区的】

    【桂m车牌是哪里,桂m车牌是广西哪个地区的】

    桂M车牌是哪个区域的车牌代码桂M归属地:河池市(广西壮族自治区)。桂M是广西省河池的车牌,如果需要办理上牌、年检、处理违章等业务,可以到河池车管所办理。桂M是广西壮族自治区河池市的车牌号码。归属地:桂M特指广西壮族自治区河池市的车辆。涵盖范围:河池市下辖的天峨、东兰、巴马、环江、罗城、宜州、凤山、南丹、都安、大化和金城江等地。车牌规则:在广西车牌编号规则...

  • 【2022年端午节高速免费几天,21年端午免高速费吗】

    【2022年端午节高速免费几天,21年端午免高速费吗】

    2022端午节湖北高速免费吗?〖壹〗、综上所述,2022年端午节期间,湖北高速公路不实行免费通行政策。〖贰〗、022年端午节高速不免费。具体说明如下:免费通行政策依据:依据《重大节假日免收小型客车通行费实施方案》,高速免费通行的时间范围明确限定为春节、清明节、劳动节、国庆节四个国家法定节假日,端午节未被纳入免费通行的节假日范畴。〖叁〗、022年端午节高速公...

  • pta2005期货实时行情(pta期货今日行情)

    pta2005期货实时行情(pta期货今日行情)

    精对苯二甲酸(PTA)期货合约期货PTA是以精对苯二甲酸(PTA)为标的物的标准化期货合约,属于化工类期货品种,主要用于规避费用波动风险或进行投机交易。PTA期货是以精对苯二甲酸(PTA)为标的物的期货合约,在郑州商品交易所上市交易,为相关企业和投资者提供套期保值及投资工具。郑州市场可以通过郑州商品交易所交易精对苯二甲酸(PTA)的期货及期权,其中PTA期...

  • 英国留学得多少学分(英国留学GPA最低要求)

    英国留学得多少学分(英国留学GPA最低要求)

    英国本科在读挂科学分不够不能按时毕业?解决办法来了〖壹〗、英国本科在读因专业难导致学分不够影响毕业,可通过补考/重修、换专业毕业、跨本升硕等方式解决。具体如下:补考或重修补考机会:若挂科情况不严重,只是个别模块挂科,学校通常会在夏季或者下一个学年初组织补考。例如南安普顿大学就有这样的安排,学生可以通过补考来弥补缺失的学分。〖贰〗、一学期差不多60几个学分,...

  • 【今日钢坯期货费用行情,钢坯今日费用多少】

    【今日钢坯期货费用行情,钢坯今日费用多少】

    当前国内钢锭的批发费用行情如何费用对比根据2024年9月的市场数据,30CrNiMo8钢锭的批发价约为9元/千克,而34CrNiMo6同期费用约为8元/千克,30CrNiMo8每公斤贵0.2元。另一条2026年2月的信息显示30CrNiMo8报价为11元/千克,但因缺少同期34CrNiMo6的费用,无法进行直接对比。近来国内公开可直接查询的钢锭批发费用信息...

返回顶部