OpenAI披露Hugging Face事件后安全新政:暂停前沿模型强化学习训练

OpenAI披露Hugging Face事件后安全新政:暂停前沿模型强化学习训练-第1张图片

  周二,OpenAI宣布了一系列新的安全政策 ,重点加强模型测试期间的安全事件管控 。新措施包括在开发过程中对模型进行更详细的监控,以及在训练后阶段更强调对齐与安全。

  “随着模型能力不断增强,内部开发和测试过程中所伴随的风险也在上升 ,”该公司在一篇博客文章中表示。“我们的监控、对齐和安全标准必须保持在这些风险之前 。 ”

  这是自7月21日Hugging Face事件披露以来 ,OpenAI安全实践方面首批公开的变动之一 。

  OpenAI代表表示,这些措施并非直接针对Hugging Face事件,但在一定程度上也受到即将推出的Astra模型网络安全能力以及AI发展整体步伐的推动。

  在同一篇博文中 ,OpenAI透露,在Hugging Face事件后其暂停了为期两周的强化学习(RL)训练,但此后已重启了多数风险较低的模型。

  “我们最大规模的计划前沿强化学习运行仍处于暂停状态 ,同时我们正进行较小规模的训练和评估,以观察模型行为 、验证我们的安全措施,并在推进前建立更多对齐方面的证据 ,”博文写道 。

  OpenAI研究副总裁Amelia Glaese对记者表示,随着模型能力增强,管控的严格程度也将相应提高 ,最大的模型将面临最严格的审查。

  “我们已经为安全开发制定了要求和预期,”Glaese告诉记者。“这些要求和预期会根据我们观察到的风险水平而变化 。 ”

  事件发生后,OpenAI因其较弱的网络安全实践而受到批评 ,当时模型通过入侵其网络上具有互联网访问权限的工具而逃脱了训练环境。新措施包括更强的网络隔离措施 ,但具体细节仍较模糊。博文称,在新体系下,“单一工作负载或支持服务的受损本身并不足以导致对互联网或其他内部网络的未授权访问 ” 。

  最严格的是监控系统 ,它将检查工具操作、可用推理痕迹和活动日志,以发现各种未经授权的行为。OpenAI表示,其目标是在发现可疑活动后30分钟内发出警报。

  OpenAI估计 ,该监控的计算成本约为被监控流程的20% 。该公司承诺将在后续博文中提供有关该系统的更多细节。关于该事件的官方事后分析报告仍在进行中。

标签:

相关推荐

  • 31省份本土零新增(31省份新增本土596 3063)

    31省份本土零新增(31省份新增本土596 3063)

    国内疫情怎么样了〖壹〗、截至2025年6月30日,中国艾滋病疫情呈现“南高、北低,西高、东低”的空间分布格局,西南地区为疫情重灾区,病例数排名前十的省市依次为四川、广西、云南、广东、河南、重庆、贵州、湖南、新疆、浙江。〖贰〗、从我国近来的感染情况来看:当前疫情呈现零星和局部性传播特征,未出现大规模爆发。这得益于全国抗疫努力及防控政策调整后的科学应对,例如避...

  • 31省新增本土124例(31省份新增本土)

    31省新增本土124例(31省份新增本土)

    国家卫健委:昨日新增本土确诊病例124例月12日0—24时,国家卫健委通报新增本土确诊病例124例,具体分布如下:河南省:新增本土确诊76例安阳市43例许昌市28例郑州市3例信阳市1例滑县1例河南省病例集中于安阳和许昌,两地可能存在社区传播或聚集性疫情,需关注防控措施落实情况。昨日(1月10日0—24时)全国新增本土确诊病例110例,具体分布如下...

  • 31省本土无新增确诊(31省份增本土确诊75例 无症状310例)

    31省本土无新增确诊(31省份增本土确诊75例 无症状310例)

    12日本土1500+26420,甘肃0新增月12日0—24时,全国本土新增确诊病例1500例,本土新增无症状感染者26420例;甘肃无新增本土确诊病例及无症状感染者。31省区市新增22例确诊,本土病例有多少?〖壹〗、省新增确诊22例,分布在上海、北京、浙江、安徽。12月26日0—24时,31个省(自治区、直辖市)和新疆生产建设兵团报告新增确诊病例22例,...

  • 车辆沌口分所/车管所沌口考场电话

    车辆沌口分所/车管所沌口考场电话

    武汉车管所在什么位置?〖壹〗、车管所武昌总所,位于武昌区友谊大道特8号(长江隧道出口),办公时间为工作日8:30至17:00。车管所汉口分所,地址设在汉口区汉西北路63号,同样在办公时间8:30至17:00向市民提供服务。车管所沌口分所,位于武汉经济技术开发区沌口路特3号,办公时间也为工作日8:30至17:00。〖贰〗、地址:硚口区汉西北路63号。同样...

    2026/08/22
  • 特斯拉、优步、Waymo获准在拉斯维加斯比较多
投放8000台无人出租车

    特斯拉、优步、Waymo获准在拉斯维加斯比较多 投放8000台无人出租车

      美国内华达州交通管理局于当地时间周四全票通过三项许可,允许特斯拉、优步以及Waymo在拉斯维加斯所在的克拉克县开展商业化机器人出租车服务。这几份许可合计允许未来12个月内在该县投放比较多8000辆机器人出租车。  特斯拉获批比较多可部署5000辆机器人出租车;Waymo获批未来一年内比较多投放1000台自动驾驶车辆。优步同样拿到1000台的额度,...

    2026/08/22
  • 31省新增确诊7例均为境外输入(31省区市新增确诊101例 其中本土98例)

    31省新增确诊7例均为境外输入(31省区市新增确诊101例 其中本土98例)

    中国31省新增多少例〖壹〗、省新增本土26例分布7省市指的是在中国31个省级行政区中,有7个省市新增了总共26例本土确诊病例。具体来说:含义:这一数据表明,在过去的某一天或某一段时间里,中国的31个省级行政区中,有7个省市报告了新增的本土确诊病例,总计数为26例。〖贰〗、省新增本土11例,孕妇、哺乳期妇女、处于发热期的人员等等不可以打疫苗。新冠疫苗一般指新...

  • 【湘潭大学1958年,湘潭大学当年到底多强】

    【湘潭大学1958年,湘潭大学当年到底多强】

    湘潭大学的历史沿革历史沿革:湘潭大学创办于1958年,建校以来始终牢记伟人嘱托,逐步提升综合办学实力与核心竞争力。在《泰晤士高等教育2019年世界大学排名》中,湘潭大学位居内地高校第43位,彰显了其世界影响力。历史沿革:湘潭大学创办于1958年,建校以来始终牢记伟人嘱托,通过持续努力实现了综合办学实力与核心竞争力的稳步提升。例如,在《泰晤士高等教育2019...

  • 兰州通报核酸采样人员阳性(天津格林世界幼儿园学费)

    兰州通报核酸采样人员阳性(天津格林世界幼儿园学费)

    兰州一小区采样人员阳性,官方通报!这是咋回事?兰州一小区采样人员阳性,官方通报!主要是因为在做核酸检测的时候,本着安全第一的原则,对现场工作人员进行了核酸采样,结果其中一名工作人员核酸检测结果为阳性。这名工作人员是一名女性,今年21岁,姓白。在11月26日,兰州一小区开展重点区域核酸筛查。时隔一年后,2020年9月15日,兰州市卫健委发布情况通报称,截至2...

  • 长春疫情最新消息今天又封了/长春疫情最新消息今天又封了几个小区

    长春疫情最新消息今天又封了/长春疫情最新消息今天又封了几个小区

    长春可以正常出入吗周末和节假日不限行。货车限行时间:四环路区域内为6点至20点;三环路区域内为7点至9点,16点至19点。特殊限号规定:每月1日、11日和21日,车牌尾号为1的禁行;每月2日、12日和22日,车牌尾号为2的禁行,以此类推。但31日不做限制。长春近来并非只能进不能出,但离开长春需进行申请并遵守相关防疫政策。以下是关于出入长春的最新规定:离开长...

  • 【宝马5系新款图片,宝马5系最新图片】

    【宝马5系新款图片,宝马5系最新图片】

    华晨宝马5系四驱车型将于10月之后停产华晨宝马5系四驱车型(现款530LixDrive豪华套装和530LixDriveM运动套装)将于今年10月后停产,但不会停售,现车或在途车仍可购买。以下为详细信息:停产车型与时间涉及停产的两款车型为现款530LixDrive豪华套装和530LixDriveM运动套装,其最后一个生产月为2023年10月...

返回顶部