OpenAI 解散了致力于防止流氓人工智能的团队

OpenAI 解散了致力于防止流氓人工智能的团队

OpenAI 解散了其“超级协同团队”,该团队的任务是在宣布成立后不到一年内抵御人工智能可能带来的生存风险。今天早些时候, Wired和其他媒体首次证实了解散的消息,同时该公司前超级协同团队联合负责人 Jan Leike 在X上发布了一篇长文。在今天的解释之前,Leike 只是在 5 月 15 日发了一条推文“我辞职了”,没有提供任何进一步的详细说明。

Leike 今天在X上写道:“我加入是因为我认为 OpenAI 是世界上进行这项研究的最佳场所。”“然而,我与 OpenAI 领导层在公司的核心优先事项上意见分歧已有一段时间,直到我们最终到达了临界点。”

OpenAI 于 2023 年 7 月成立了超级联盟项目。在一篇随附的博客文章中,该公司声称超级人工智能“将成为人类有史以来最具影响力的技术,可以帮助我们解决世界上许多最重要的问题。但超级人工智能的巨大力量也可能非常危险,可能会导致人类丧失权力甚至灭绝。”

昨天是我担任协调主管、超级协调负责人和 @OpenAI 执行官的最后一天。— Jan Leike (@janleike)

“ rel="noreferrer noopener nofollow">2024 年 5 月 17 日

“管理这些风险需要建立新的治理机构,并解决超级智能协调问题,”该公司继续说道,同时宣布 Leike 和 OpenAI 首席科学家兼联合创始人 Ilya Sutskever 为超级协调团队的联合负责人。Sutskever 也因类似担忧离开了 OpenAI,而该团队的剩余成员据称已被其他研究小组吸收。

该公司的高管和开发人员,包括首席执行官 Sam Altman,曾多次警告“流氓人工智能”的威胁,如果设计不当,可能会绕过人类的安全措施。与此同时,OpenAI 与谷歌和 Meta 等公司经常宣传他们最新的人工智能产品进展,其中一些产品现在可以制作近乎逼真的媒体和令人信服的人类音频。本周早些时候,OpenAI 宣布发布 GPT-4o,这是一种多模态生成人工智能系统,可以对人类的提示做出栩栩如生的响应,尽管有时仍然有些生硬。一天后,谷歌公布了自己的类似进展。尽管据称存在严重风险,但这些公司经常声称自己正是能够解决这些问题的专家,同时游说制定行业法规。

[相关:萨姆·奥特曼:人工智能时代需要“能源突破” ]

尽管雷克离职和超级对齐团队关闭的具体细节尚不清楚,但最近的内部权力斗争暗示了人们对如何以安全、公平的方式推动行业发展的意见存在明显分歧。一些批评人士认为,人工智能行业正迅速进入收益递减的时代,促使科技领导者降低对产品的期望并改变目标。雷克等其他人似乎确信人工智能可能很快仍会对人类构成严重威胁,而像 OpenAI 这样的公司并没有足够重视这一点。

但正如许多批评人士指出的那样,生成式人工智能还远未具备自我意识,更谈不上“叛变”。然而,无论聊天机器人是否有感知能力,现有技术已经影响到虚假信息、内容所有权和人类劳工权利等主题。随着公司继续将新兴的人工智能系统推向网络搜索、社交媒体和新闻出版物,社会将不得不承担由此带来的后果。

<<:  无人机和人工智能如何帮助农民对抗臭虫入侵

>>:  新技术可以缩小体积的 MRI 机器

推荐阅读

大众 XL1 是有史以来最节能的汽车

多年来,汽车制造商一直致力于将燃油经济性提高到每加仑 100 英里以上。达到这一目标通常意味着三件事...

为什么乐高风格的“Phonebloks”概念会失败

Phonebloks 概念是一种基于块的“模块化”智能手机理念,它是一种近乎天才、环保、“我应该想...

Code Geass:被放逐的秋人第 3 章 - 闪耀之人从天而降 - 评论:发展超出预期,人物性格更加深刻

《Code Geass:被放逐的秋人 第3话 闪耀者从天而降》综合评论与推荐概述《Code Geas...

给碳定价可以减缓海洋酸化

在过去两个世纪中,海洋的化学成分以地质记录中前所未有的速度发生变化。海水的酸性增加了约 30%。它不...

支持少数族裔 STEM 学生的 5 种方法

艾哈迈德·穆罕默德因将他的时钟项目带到德克萨斯州麦克阿瑟高中而被捕,这引发了公众的愤怒(以及标签#I...

纽约地铁灾难的 19 个循证解决方案

9 月 25 日,纽约大都会运输署董事会批准了一项 515 亿美元的计划,用于改善地铁、公交车和通勤...

这些毛毛虫吃塑料袋

塑料袋如果不持久存在,就什么都不是——即使我们想让它们消失。我们曾尝试在一些城市禁止使用塑料袋,或在...

黑暗芝居第 5 季:恐惧深渊的又一次挑战

亚米十八第 5 季 - 亚米十八《暗黑破》系列被誉为恐怖动漫的代表作,第五季尤其值得关注。该系列于 ...

5 个迹象表明你的笔记本电脑有问题

当您的笔记本电脑出现严重问题时,您通常会提前收到警告。例如,病毒可能会更改您的安全设置,或者出现故障...

韩国准备与朝鲜展开无人机战争

朝韩非军事区是朝鲜战争的产物,是一条两英里半宽、防守森严的固定前线,这场战争从未正式结束。但战争结束...

22 张令人惊叹的图片将科学变成了艺术

二十年来,Wellcome Images 每年都会向其收藏的最佳科学和医学图像颁发奖项。今年的收藏令...

这款鸟腿式四轴飞行器可以轻松栖息在树梢上

鸟类已经掌握了在粗糙、有纹理的树枝等复杂表面上着陆的技巧。现在,斯坦福工程师开发了一种新型机器人,它...

科学家正在开发一种用于检测创伤性脑损伤的手持式眼部扫描仪

脑震荡等创伤性脑损伤发生后的最初 60 分钟通常被称为患者的“黄金时间”。在这个狭窄的时间内识别和诊...

《Play Ball》的号召力与评价:探索棒球动漫的新可能性

Play Ball - 描绘青春热血心跳的棒球动画魅力2005年至2006年播出的电视动画《Play...

设计调整如何帮助起搏器电池延长使用寿命

可充电锂离子电池在电池领域风靡一时,因为它们为从手机到电动汽车等各种设备供电。但自 20 世纪 90...