国际财经

OpenAI警告 超级AI或10年内灭绝人类

(旧金山6日讯)AI聊天工具ChatGPT的开发商OpenAI警告,超级人工智能或在10年内出现,并导致人类毁灭!

该公司因此计划投入大量资源,创建一个新的研究团队,以确保其人工智能对人类来说是安全的,最终使用人工智能来监督自身。

OpenAI联合创始人伊利亚苏克维尔和对齐团队负责人简莱克在一篇部落格文章中写道:“超级智能的巨大力量可能导致人类被剥夺权力,甚至人类灭绝。目前,我们还没有一个解决方案来操纵或控制一个潜在的超智能人工智能,并防止它失控。”

他们预测,超智能人工智能——比人类更聪明的系统——可能在这个十年到来。人类将需要比目前更好的技术来控制超智能人工智能,因此需要在所谓的“对齐研究”方面取得突破,该研究的重点是确保人工智能对人类有益。

研究用AI监管AI

他们写道,由微软支持的OpenAI将在未来四年中将其获得的计算能力的20%用于解决这个问题。此外,该公司正在组建一个新的团队来组织这项工作,称为超级对齐团队。

该团队的目标是创建一个“人类水平”的AI对齐研究者,然后通过大量的计算能力进行扩展。OpenAI表示,这意味着他们将使用人类反馈来训练AI系统,训练AI系统辅助人类评估,然后最终训练AI系统进行实际的对齐研究。

但人工智能安全倡导者康纳莱希对OpenAI的这一计划提出了异议,认为该计划从根本上存在缺陷,因为最初的人类水平的人工智能可能会在被迫解决人工智能安全问题之前失控并造成严重破坏。

他在接受采访时说:“在构建人类水平的智能之前,你必须先解决对齐问题,否则默认情况下你无法控制它。我个人认为这不是一个特别好的或安全的计划。”

反应

 

国际财经

对抗OpenAI 亚马逊加码Anthropic 180亿

(华盛顿23日讯)亚马逊将增加在OpenAI竞争对手、生成式AI软件Claude开发商Anthropic的持股。

云计算巨头亚马逊周五在一份声明中表示,将向这家旧金山初创公司追加投资40亿美元(约179亿令吉)。

在此之前,亚马逊已经向Anthropic投资40亿美元。今年早些时候的投资条款包括Anthropic使用Amazon Web Services (AWS)数据中心来满足其部分计算需求,以及AWS设计的人工智能芯片。Anthropic还与Alphabet旗下的谷歌关系密切。

Anthropic由OpenAI前员工于2021年创立,已成为最接近OpenAI的竞争对手之一。它的Claude系列聊天机器人被广泛认为是最有能力从头开始生成文本并拥有类似人类推理能力的机器人之一。

反应
 
 

相关新闻

南洋地产