OpenAI披露Hugging Face事件后安全新政:暂停前沿模型强化学习训练

OpenAI披露Hugging Face事件后安全新政:暂停前沿模型强化学习训练-第1张图片

  周二,OpenAI宣布了一系列新的安全政策,重点加强模型测试期间的安全事件管控。新措施包括在开发过程中对模型进行更详细的监控 ,以及在训练后阶段更强调对齐与安全 。

  “随着模型能力不断增强,内部开发和测试过程中所伴随的风险也在上升,”该公司在一篇博客文章中表示。“我们的监控、对齐和安全标准必须保持在这些风险之前。”

  这是自7月21日Hugging Face事件披露以来 ,OpenAI安全实践方面首批公开的变动之一 。

  OpenAI代表表示,这些措施并非直接针对Hugging Face事件,但在一定程度上也受到即将推出的Astra模型网络安全能力以及AI发展整体步伐的推动。

  在同一篇博文中 ,OpenAI透露,在Hugging Face事件后其暂停了为期两周的强化学习(RL)训练,但此后已重启了多数风险较低的模型。

  “我们最大规模的计划前沿强化学习运行仍处于暂停状态 ,同时我们正进行较小规模的训练和评估,以观察模型行为、验证我们的安全措施,并在推进前建立更多对齐方面的证据 , ”博文写道 。

  OpenAI研究副总裁Amelia Glaese对记者表示 ,随着模型能力增强,管控的严格程度也将相应提高,最大的模型将面临最严格的审查。

  “我们已经为安全开发制定了要求和预期 ,”Glaese告诉记者。“这些要求和预期会根据我们观察到的风险水平而变化 。”

  事件发生后,OpenAI因其较弱的网络安全实践而受到批评,当时模型通过入侵其网络上具有互联网访问权限的工具而逃脱了训练环境。新措施包括更强的网络隔离措施 ,但具体细节仍较模糊。博文称,在新体系下,“单一工作负载或支持服务的受损本身并不足以导致对互联网或其他内部网络的未授权访问 ” 。

  最严格的是监控系统 ,它将检查工具操作 、可用推理痕迹和活动日志,以发现各种未经授权的行为 。OpenAI表示,其目标是在发现可疑活动后30分钟内发出警报。

  OpenAI估计 ,该监控的计算成本约为被监控流程的20%。该公司承诺将在后续博文中提供有关该系统的更多细节 。关于该事件的官方事后分析报告仍在进行中。

标签:

相关推荐

  • 能源冲击没完?IMF总裁:全球央行应专注于抗通胀,AI影响仍极不确定!

    能源冲击没完?IMF总裁:全球央行应专注于抗通胀,AI影响仍极不确定!

      转自:财联社  财联社8月26日讯(编辑黄君芝)当地时间周二,世界货币基金组织(IMF)总裁格奥尔基耶娃表示,全球经济经受住了伊朗战争能源冲击的考验,情况比预期要好,但她对一些国家财政状况恶化表示担忧,债券收益率上升和通胀降温进程停滞不前就证明了这一点。  当天,格奥尔基耶娃在IMF位于华盛顿的总部向记者表示,当前全球经济陷入一场“拉锯战”,即中...

    2026/08/26
  • 期货行情成交明细/期货历史成交明细

    期货行情成交明细/期货历史成交明细

    期货中成交明细怎么看?分别代表什么意思?期货中成交明细的查看及各项代表的意义如下:最新意义:代表在不久前成交的最新费用。这是市场最新的交易费用,反映了当前市场的买卖动态。现手意义:代表最近成交的数量。每一笔交易都有对应的成交数量,现手显示了最近一次或几次交易的具体数量。总手意义:指的是在当天成交的总手数。期货中的成交明细主要显示了期货合约在每一...

  • 石油期货行情预测/石油期货走势分析

    石油期货行情预测/石油期货走势分析

    原油期货后期行情怎么看?原油期货后期行情的预测具有不确定性,但可以从以下几个方面进行分析:全球经济增长情况积极影响:若全球经济持续增长,将带动工业生产、交通运输等领域的石油需求增加,从而对油价产生积极影响,可能推动油价上涨。负面影响:相反,如果全球经济出现放缓或衰退迹象,石油需求可能下降,导致油价承压下跌。地缘政治因素紧张局势:地缘政治紧张局势、战争...

  • 风险区高中低调整为高低/2022疫情高中低风险地区划分标准

    风险区高中低调整为高低/2022疫情高中低风险地区划分标准

    高低风险区域划分标准(高低中风险区划分)〖壹〗、疫情低风险、中风险、高风险的划分主要依据病例数、传播风险及区域防控需求,具体标准如下:低风险地区:判定标准为无新增本土病例,即连续14天内无新增本地确诊病例或无症状感染者。低风险区指中、高风险区所在县(市、区、旗)的其他地区,实行“个人防护、避免聚集”的防控措施。〖贰〗、高风险地区界定:累计病例数超过50例,...

  • 【近来进口白糖行情,现在进口白糖的现货价是多少钱】

    【近来进口白糖行情,现在进口白糖的现货价是多少钱】

    进口白砂糖一吨的市场售价是多少进口白砂糖官方估算售价2026年5月24日公开信息显示,配额内进口白砂糖估算价为4050-4110元/吨;同期配额外进口白砂糖估算价为5140-5210元/吨。不同品种和质量的白糖费用范围大致在六千到七千人民币一吨之间。具体费用会因品质、产地、季节以及市场供需关系等因素有所波动。通常来说,优质原糖的费用会相对较高,可能接近...

  • 上海新增20处中风险区(上海市1地调整为中风险地区了吗)

    上海新增20处中风险区(上海市1地调整为中风险地区了吗)

    上海新增中风险地区是哪里?〖壹〗、上海22日新增2例本地新冠肺炎确诊病例,其居住地浦东新区张江镇顺和路126弄小区列为中风险地区。上海已经先后将浦东新区祝桥镇营前村、浦东新区周浦镇明天华城小区、浦东新区祝桥镇新生小区和浦东新区张江镇顺和路126弄小区列入中风险地区。〖贰〗、上海中高风险地区如下:嘉定区:2个。嘉定区马陆镇康年路261号工地宿舍。嘉定区江桥镇...

  • 昆明呈贡区疫情最新消息/昆明呈贡最新消息今天

    昆明呈贡区疫情最新消息/昆明呈贡最新消息今天

    「知乎城市-昆明」春城周报【第五期】2021/11/29-2021/12/5〖壹〗、首期效果:11月27日发放以来,市民消费热情高涨,商家销售额显著增长。〖贰〗、建设周期:总工期42个月,计划2024年2月完工,2024年6月投入运营,近来进展顺利。意义:以大项目引领旅游经济增长,打造昆明旅游产业升级新引擎。城市时事要闻昆明城市竞争力跃升10位排名变化:...

  • 工信部:6G是“十五五”时期核心技术攻关重中之重 要让信息通信技术融入车间产线,深入矿山、井下

    工信部:6G是“十五五”时期核心技术攻关重中之重 要让信息通信技术融入车间产线,深入矿山、井下

      8月26日,国务院新闻办公室举行“开局起步‘十五五’”系列主题新闻发布会,介绍全力抓好“十五五”规划实施,加快推进新型工业化有关情况。  工业和信息化部信息通信发展司司长刘郁林表示,6G是“十五五”时期核心技术攻关的重中之重。我们将加快6G核心技术攻关,持续开展6G技术实验、标准研制,促进6G产业成熟和生态构建,为6G的商用做好准备。面向需求侧,深化应用...

    2026/08/26
  • 【哪些人曾在英国留学,哪些人曾在英国留学过】

    【哪些人曾在英国留学,哪些人曾在英国留学过】

    英国留学的中国名人〖壹〗、以下是一些曾在英国留学的中国名人:黄宽是中国首位留英西医学者,1855年获得英国爱丁堡大学医学博士学位。归国后,他完成了国内首例胚胎截开术,并参与创办南华医学校,为中国医学教育的发展奠定了基础。贾顺浩毕业于拉夫堡大学与伯明翰大学,现任大连英博足球俱乐部一线队助理教练。〖贰〗、广东金融学院培养的名人主要包括以下几位:赵瑜佩:学术与艺...

  • 【浙江新增本土确诊44例,浙江新增19例新型肺炎确诊病例 累计确诊病例62例】

    【浙江新增本土确诊44例,浙江新增19例新型肺炎确诊病例 累计确诊病例62例】

    国家卫健委:10日本土新增“302+1545”月10日0—24时,31个省(自治区、直辖市)和新疆生产建设兵团报告新增本土确诊病例302例,新增本土无症状感染者1545例。具体数据及分析如下:本土确诊病例情况总体数据:新增本土确诊病例302例。月10日0—24时,全国新增本土确诊病例302例,新增本土无症状感染者1545例,甘肃省无新增本土确诊病例和无症...

返回顶部