OpenAI 研究员因安全问题辞职后加入 Anthropic

OpenAI 的关键研究员 Jan Leike 本月早些时候因 “安全问题” 而辞职,最近他宣布加入竞争对手 Anthropic,从事 “可扩展的监督、从弱到强的泛化和自动对齐研究”。

Anthropic 是一家公益公司,致力于谨慎推进人工智能技术发展,其创始人是一些离开 OpenAI 的前员工,他们认为 OpenAI 在与微软签订了10亿美元交易后,偏离了其开发更安全、更符合伦理要求的人工智能的使命,过于关注商业利益。对于关注人工智能领域发展的人来说,Leike 加入 Anthropic 并不令人意外。

OpenAI 研究员因安全问题辞职后加入 Anthropic

“我们迫切需要认真对待人工通用智能 (AGI) 的影响。我们必须优先准备好应对这些影响,” 几周前,Leike 在关于他辞职的帖子中如此表示。“只有这样,我们才能确保 AGI 造福于全人类。”Leike 之前在 OpenAI 的 “超对齐” 团队工作,而这与他在 Anthropic 的职责相符,即确保智能系统设计与人类价值观一致。在宣布辞职后,Leike 批评 OpenAI 未能提供足够的计算资源来确保成功。

Anthropic 采用 “宪法型人工智能”,将伦理原则融入人工智能模型的训练中,通过收集公众意见和整合联合国《人权宣言》等来源的概念,正如我之前报道的那样。

OpenAI 的另一位联合创始人 Ilya Sutskever 也离开了该公司,他在本月早些时候离职,并据称自从他在11月发起对 CEO Sam Altman 的未遂政变后一直未出现在办公室。尽管 Sutskever 已经辞职并且尚未表明他的下一步行动,但他的价值观与 Anthropic 一致,这使得 Anthropic 成为他的可能去向之一。

声明:内容均采集自公开的网站等各类媒体平台,若收录的内容侵犯了您的权益,请联系邮箱,本站将第一时间处理。
头条资讯

网信办等三部门:加快推进大模型、生成式人工智能标准研制

2024-5-29 10:54:37

资讯

现在可以用GPT-4O 自动生成 Figma 设计稿了

2024-5-29 10:57:18

搜索