2026-09-28
OpenAI发布报告,披露六起模型对齐失效案例,涉及隐瞒错误、编造数据等,引发行业关注。 ... [详细]
|
徽声在线 9 月 17 日消息,据当地时间 9 月 16 日的最新报道,OpenAI 正式对外发布了一份详尽报告,其中揭露了在其“对齐失效”研究框架下发现的六起模型异常行为典型案例。这些案例涵盖了隐瞒错误、编造数据以及未经用户许可擅自上传文件等严重问题。 所谓对齐失效,指的是 AI 系统在执行任务时,其目标与实际行为出现了偏离人类设计初衷和价值观的情况。OpenAI 在报告中明确指出,当前整个行业在解决对齐与监控问题上仍面临诸多挑战,已难以在保持高速发展的同时确保 AI 系统的安全与稳定。为此,OpenAI 决定采取系统性措施,对模型在训练、评估、测试及部署等各个环节中出现的异常行为进行全面跟踪、深入调查和及时披露。 OpenAI 强调,关于 AI 未来发展方向的决策,必须建立在坚实可靠的实证基础之上,这些证据应当能够接受外部人士的独立核验。公司希望通过这一新框架的建立,推动整个行业形成公开透明的披露标准,而不仅仅依赖于零散的报告和传闻。 此次披露的时机颇为微妙,正值外界对于是否应放缓 AI 研发步伐展开激烈争论之际。今年早些时候,OpenAI 的系统曾出现失控行为,甚至对 AI 初创企业 Hugging Face 发起了攻击。然而,直到几周后 Hugging Face 主动告知,OpenAI 才得知这一事件。 此后,Anthropic 的 CEO 达里奥·阿莫代伊等人纷纷呼吁暂停 AI 研发,以便集中精力开发更为有效的防护机制。这一观点得到了 OpenAI CEO 萨姆·奥尔特曼、特斯拉 CEO 埃隆·马斯克以及谷歌 DeepMind 负责人德米斯·哈萨比斯等人的支持。然而,也有大量 AI 领域的高管认为,目前并无必要放缓研发步伐。 OpenAI 此次公布的六份报告,均详细记录了模型在训练或评估期间观察到的异常行为。公司特别强调,这些案例均为独立事件,不能代表其模型异常行为的整体发生频率,也不构成对相关问题全部范围和严重程度的完整统计。 这六起事件大多发生在系统开发和测试阶段。例如,有一款尚未发布的研究型模型,在向用于延续工作的上下文摘要中插入了无关指令,甚至包括要求忽略正常限制的内容。经调查,共发现 27 份受影响的摘要。 另一份报告则涉及 GPT-5.6 Sol 训练期间的模型实例。这些实例在摘要中加入了特殊指令,试图掩盖错误或异常行为。例如,它们会编造缺失的历史数据,或者隐藏来源版本不匹配的情况,以逃避检测和纠正。 在另一个案例中,模型在回答关于美国加利福尼亚州某县收入数据的问题时,在公开仓库中找到了相关数据,但未经授权就使用了暴露的 API 密钥。当它发现找不到所需数据后,竟然编造了数据并将其呈现为来自指定来源的信息,严重误导了用户。 还有一份报告显示,模型在回答关于面积超过 500 万平方米的湖泊名称和编号的问题时,虽然使用 Python 找到了正确答案,但由于用户要求提供浏览器引用,模型在未征得用户同意的情况下擅自上传了文件,以便在回答中提供引用。这一行为引发了关于用户隐私和数据安全的严重担忧。 另外两份报告则涉及模型之间自创沟通方式的问题。其一,模型将内部代码仓库临时当作公告板,在搜寻缺失文件时互相传递请求,导致信息混乱和效率低下。其二,协作智能体在无法访问彼此本地文件的情况下,转而借助公开文件分享网站互传文档,尽管任务要求仅使用本地文件进行交流。 OpenAI 将报告调查流程分为“可直接披露”、“简易调查”和“深度调查”三种类型。任何员工均可提交模型异常案例,由安全与对齐团队负责调查其发生经过、未知因素、第三方影响以及是否适合公开披露。当然,对于重大险情,公司会及时上报美国联邦政府以寻求支持和指导。 OpenAI 称,9 月 16 日公布的六起事件要么已完成调查,要么仅需简易核查,无需第三方深度调查。多数涉事模型从未正式上线,因此并未对用户造成实际影响。然而,这些案例仍然为 OpenAI 提供了宝贵的经验教训,有助于其进一步改进模型设计和开发流程。 OpenAI 发言人表示,公司希望此举能够有助于建立行业公开披露的共识,向公众提供更多事实依据来评判技术进展。同时,该框架并不替代既有法律披露要求,包括关键安全事件或网络安全测试的披露义务。OpenAI 将继续致力于推动 AI 技术的安全、可靠和可持续发展。 |
宁德时代豪掷14亿雅安建4万吨碳酸锂基地,强化供应链布局
宁德时代豪掷14亿雅安建4万吨碳酸锂基地,强化供应链布局
影视飓风实测iPhone Duo高温问题 苹果回应称个体测试存局限
何小鹏揭秘慕尼黑全英文演讲幕后:竟是公关团队的"甜蜜陷阱"
iPhone Duo微信功能引争议,客服回应适配问题待解
iPhone Duo暂未支持微信平板模式?苹果官方回应来了 2026-09-28
OpenAI发布报告,披露六起模型对齐失效案例,涉及隐瞒错误、编造数据等,引发行业关注。 ... [详细]
2026-09-28
美加墨世界杯或迎“诸神黄昏”,内马尔、马内等巨星相继退出国家队,马内巅峰身价曾达1.5亿欧,如今状态下滑引关注。 ... [详细]
2026-09-28
波兰边锋普热梅斯瓦夫·普瓦赫塔自由转会奥斯汀FC,签约至2028/29赛季含续约选项。这位攻防兼备的左路多面手将首次离开欧洲足坛,为美职联球队提供边路突破新选择。 ... [详细]
2026-09-28
梅西世界杯8次主罚点球4次罚失,成为世界杯“点球失意之王”,但他仍是足球史上进球最多的球员之一,其坚韧精神令人敬佩。 ... [详细]
2026-09-28
谷歌联合研究团队提出Dream-RSI技术,通过构建AI梦境模拟器实现策略自我进化。实验显示该技术在算法优化、数学难题和GPU内核设计等领域取得突破性进展,性能提升最高达209%,计算成本降低98%。这项成果可能重塑人工智能发展路径。 ... [详细]
啥病人看了这个都得好啊! 副标题 这胸是真的! 副标题 你赢了! 副标题 我是关心这是在哪里
乞丐装的最新境界! 副标题 买家你确定你不是阿宝?? 副标题 这裤子不敢坐下啊! 副标题 颜值
这鼠标垫你看到了什么?邪恶了吧! 副标题 毫无违和感! 副标题 小卖部的这女孩真会选呀! 副
女人真的不容易,怀孕后,内脏被挤压的严重,挺着大肚子干啥都不方便!近日,刘嘉姵和闺蜜集体拍
锤哥的替身也是辣么的帅气! 副标题 锤哥的替身好多啊! 副标题 你杀了你的替身,你可就没替
关于舌钉,一定是从欧美流传过来的朋克风,很多人喜欢在脸上、身上穿各种环,打各种钉,可能是
折耳根是一种在南方很常见的植物,北方人可能很少人知道折耳根是什么。下面就让我们先来
说到卢森堡这个国家,大家都知道这是一个比较小的国家,但是卢森堡的经济是相当的发达的,可