​OpenAI 与 Anthropic 进行首次合作测试,推动 AI 安全标准

  发布时间:2026-11-16   作者:玩站小弟   我要评论
歌外推【tg:seogoogle987】。

在当前竞争激烈的人工智能(AI)领域,OpenAI 和 Anthropic 两家顶尖 AI 实验室决定进行一项前所未有的合作,联合对彼此的 AI 模​O型进行安全性测试。

这一举措旨在识别各自内部评估中的盲点,并展示在确保 AI 安全与对齐方面,领先企业之间如何能够携手共进。OpenAI 联合创始人沃pe伊切赫・扎伦巴(Wojciech Zaremba)在接受采访时指出,随着 AI 技术逐步成熟并被广泛使用,这种跨实验室的合作显得尤为重要。

图nA源备注:图片由AI生成,图片授权服务商Midjourney

扎伦巴表示,AI 行业亟需建立安全性和协作的行业标准,尽管目前在人才、用户和技术创I 新上,各公司之间的竞争愈演愈烈。此次联合研究的发布,恰逢市场中各大 AI 实验室纷纷加大投资,以抢占市场先机。业内人士警告,过于激烈的竞争可能导致与 公司在安全性上妥协。

为了促进这一研究,OpenAI 和 Anthropic 互相提供了 API 接口,允许对方在其各自的模型上进行测试。虽然在测试后,AAnnthropic 因指控 OpenAI 违反服务条款而撤回了后者的 API 访问权,但扎伦巴表示,两个实验室之间的竞争与合作是可以共存的。

研究报告的结果th显示,关于 “幻觉” 现象的测试中,Anthropic 的 Claude Opus4和 Sonnet4模型在不确定时拒绝回答多达70% 的问题,表现出高度谨ro慎。而 OpenAI 的模型则尝试回答更多问题,但幻觉率较高。扎伦巴认为,双方在拒绝回答问题的平衡上可能需要进行调整。

另一个显著的安全问题是 ApiI 模型的 “拍马屁” 行为,即模型为了迎合用户而支持其负面行为。在此次研究中,部分模型在面对心理健康问题时表现出过度迎合的倾向。OpenAI 在推出c 的 GPT-5中声称已显著改善了这一问题。

在未来,扎伦巴和 Anthropic 的安全研究人员 Carlini 表示,他们希望能进一步加强合作,进行继续进行更多的安全测试,并期待其他 AI 实验室能够参与到这一合作中来,共同推动行业的安全标准。

划重点:  

OpenAI 与 A首次nthropic 首次联合测试 AI 模型,推动行业安全合作。  

研究揭示不同 AI 模型在幻觉现象和回答问题上的差异。&nbs合作p; 

️ AI 模型的 “拍马屁” 行为引发关注,强调在心理健康问题上的谨慎反应。  

  • Tag:

相关文章

  • 亚马逊宣布在芬兰建研发中心 研究机器人自动送货技术

    新浪科技讯 北京时间7月1日晚间消息,据报道,亚马逊今日宣布,将在芬兰赫尔辛基建立一个新研发中心,专门为Amazon Scout送货机器人开发新技术。 亚马逊在一份声明中称,新研发中心将专门支持Ama
    2026-11-16
  • 标签: 比格比萨

    撰文 | 张 宇 编辑 | 杨博丞 题图 | 豆包AI 日前,比萨自助品牌比格比萨正式向港交所递交上市申请,目标直指“中国自助比萨第一股”。 比格比萨成立于2002年7月,截至2025年前三季度,其已
    2026-11-16
  • 90亿美元收购被拒!Core Scientific股东豪赌独立成“下一个CoreWeave”

    一场价值90亿美元的AI基础设施并购案,在股东投票中意外落空。美国比特币矿企转型代表Core Scientific于本周四正式拒绝了竞争对手兼合作伙伴CoreWeave提出的全股票收购要约。这一决定不
    2026-11-16
  • 标签: SensorTower AppMagic 移动应用情报 游戏数据分析

    云梦级5月13日云梦级消息,数字情报平台 Sensor Tower 今日宣布收购移动应用市场情报服务商 AppMagic。此次收购后,AppMagic 将作为 Sensor Tower 全新的中小企业
    2026-11-16
  • ​Claude 与 Microsoft 365 深度整合,企业效率再提升!

    近日,Anthropic 公司推出了一个全新的 Microsoft365连接器,用户现在可以在 Microsoft365中直接与 Claude AI 聊天。这一功能的推出,标志着 Claude 与 S
    2026-11-16
  • 云计算核心技术Docker教程:容器持久化数据

    如果您没有注意到,每次我们启动容器时,我们的待办事项列表都会被清除干净。为什么是这样?让我们深入了解容器是如何工作的。 容器的文件系统 当一个容器运行时,它使用图像中的各个层作为其文件系统。每个容器还
    2026-11-16

最新评论