当前位置:首页> AI教程> 全球千位AI大佬联名呼吁暂停训练比GPT-4更强AI系统

全球千位AI大佬联名呼吁暂停训练比GPT-4更强AI系统

释放双眼,带上耳机,听听看~!
全球千位AI大佬联名呼吁暂停训练比GPT-4更强AI系统,公开信表示高级AI可能对社会和人类构成深远的风险,呼吁制定共享安全协议。

全球千位AI大佬联名呼吁暂停训练比GPT-4更强AI系统

新智元报道

编辑:编辑部

【新智元导读】GPT-4 强到发指,不止群众们恐慌,今天,全世界的 AI 大佬们也出手了!千人发表联名信,呼吁所有人暂停训练比 GPT-4 更强的 AI。

就在刚刚,网上曝出了一封千位大佬的联名信,要封杀所有比 GPT-4 强的 AI!

全球千位AI大佬联名呼吁暂停训练比GPT-4更强AI系统

在这封联名信上,超过 1000 位大佬呼吁——我们应该立即停止训练比 GPT-4 更强大的 AI 系统,暂停期至少 6 个月。

目前签名的有,图灵奖得主 Yoshua Bengio、Stability AI 首席执行官 Emad Mostaque、苹果联合创始人 Steve Wozniak、纽约大学教授马库斯、马斯克,以及「人类简史」作者 Yuval Noah Harari 等等。

全球千位AI大佬联名呼吁暂停训练比GPT-4更强AI系统

看看这根本看不到头的签名,大佬含量过高了。

全球千位AI大佬联名呼吁暂停训练比GPT-4更强AI系统

能够集齐一千多位大佬的签名,想必这项联名已经准备多时了。

不过,同样作‍为‍图灵奖得主的 Yann ‍‍LeCun 并没有签署:「我不同意这个前提。」

全球千位AI大佬联名呼吁暂停训练比GPT-4更强AI系统

另外,签名中还出现了一个所谓的「OpenAi CEO」,但根据马库斯和一众网友的推测,这应该不是本人签的名。整件事非常扑朔迷离。

全球千位AI大佬联名呼吁暂停训练比GPT-4更强AI系统

截止发稿前,他还特地 @了一下 Sam Altman 确认消息真假。

全球千位AI大佬联名呼吁暂停训练比GPT-4更强AI系统

大佬联名:叫停比 GPT-4 强的 AI

公开信表示,大量研究表明,得到顶级 AI 实验室的认可、具有和人类竞争智能的 AI 系统,可能对社会和人类构成深远的风险。

正如广泛认可的 Asilomar AI 原则中所述,高级 AI 可能意味着地球生命史上的深刻变化,我们应该投入相应的考量和资源,对之进行规划和管理。

全球千位AI大佬联名呼吁暂停训练比GPT-4更强AI系统

不幸的是,到现在为止,还没有任何人采取行动。

最近这几个月,全球的 AI 实验室已经完全失控了,它们疯狂地开展 AI 竞赛,来开发和部署更强大的 AI,而没有任何人可以理解、预测、控制这些 AI,连它们的创造者都不能。

如今,AI 系统在一般任务上已经变得和人类一样有竞争力,我们必须扪心自问:

是否应该让机器用宣传和谎言充斥我们的信息渠道? 是否应该让所有的工作都变得自动化,即使是令人满意的工作?是否应该发展可能某一天会超越我们、淘汰我们、取代我们的非人类智能?是否应该冒险失去对人类文明的控制?

全球千位AI大佬联名呼吁暂停训练比GPT-4更强AI系统

任何未经选举产生的技术领导者,都没有权利做出如此重要的决定。

只有当我们确信,这种 AI 的影响是积极的、风险是可控的时候,才应该开发强大的 AI 系统。而且,我们必须有充分的理由相信这一点,潜在的影响越大,我们就更加需要确信这一点。

OpenAI 最近关于通用人工智能的声明指出,「从某个时间点以后,在开始训练未来的系统之前,进行独立的审查可能非常重要,而对于创建新模型所用算力的增长速度,也应该有所限制。」

我们同意这一点,而那个时间点,就是现在。

因此,我们呼吁所有 AI 实验室立即暂停训练比 GPT-4 更强大的 AI 系统,至少 6 个月。

全球千位AI大佬联名呼吁暂停训练比GPT-4更强AI系统

这种暂停应该向所有人公开,所有人都可验证,并且要涉及所有关键成员。如果不能迅速暂停,就应该让政府介入。

在这 6 个月内,所有 AI 实验室和独立学者都应该合力开发一套共享安全协议,用于高级 AI 的设计和开发。协议完成后,应该由独立的外部专家进行严格的审计和监督。这些协议必须确保这些 AI 系统毋庸置疑的安全。

这并不是说,我们要绝对暂停 AI 的开发,只是说,我们应该从危险的竞赛中退后一步,转向具有涌现能力的、更大的、不可预测的黑箱模型。

全球千位AI大佬联名呼吁暂停训练比GPT-4更强AI系统

所有的人工智能研究和开发,都应该重新聚焦于这一点——让当如今最强大的 SOTA 模型更加准确、安全、可解释、透明、稳健、对齐,值得人类信赖,对人类忠诚。

与此同时,开发者必须与政策制定者合作,大幅加快开发强大的 AI 管理系统。

系统至少应该包括:

  • 专门负责监管 AI 的机构

  • 出处和水印系统,从而帮助区分真实与生成的内容,并且能够跟踪模型的泄漏

  • 强大的审计和认证系统

  • 在 AI 造成伤害后,明确谁该承担责任

  • 为 AI 安全技术研究提供强大的公共资金

人类可以享受 AI 带来的繁荣未来。在成功创建了强大的 AI 系统后,我们可以享受「AI 之夏」,收获回报,设计上述系统,以造福所有人,给全人类一个适应的机会。

现在,我们的社会已经暂停其他可能造成灾难性影响的技术。对于 AI,我们也该如此。

让我们享受一个漫长的 AI 夏天,而不是毫无准备地进入秋天。

全球千位AI大佬联名呼吁暂停训练比GPT-4更强AI系统

全球千位AI大佬联名呼吁暂停训练比GPT-4更强AI系统

很快,这封千位大佬签署公开信就引发了舆论的轩然大波。

支持的人认为,对于 AI 的恐慌是合理的,因其训练效率太高,智能的水平每天都在膨胀。

反对的人甚至贴出了爱迪生指使人画的交流电害死人的宣传海报,认为这不过莫名的指控,是别有用心的势力在误导不明真相的群众。

全球千位AI大佬联名呼吁暂停训练比GPT-4更强AI系统

Sam Altman,态度耐人寻味

从最近发生的事来看,这封信的到来,可谓是千呼万唤始出来。

从去年 11 月底,ChatGPT 仿佛叩响了发令枪,全世界的 AI 机构都在疯狂冲刺,卷到红了眼。

而「始作俑者」的 OpenAI,脚步也丝毫没有放慢,联合着金主爸爸微软,它隔一阵就给我们来一个暴击。

先进的 AI 工具带给人们的恐慌,一波又一波冲击着所有人。

全球千位AI大佬联名呼吁暂停训练比GPT-4更强AI系统

今天,大佬们终于出手了。

而在昨日公开的访谈中,Sam Altman 的话中,竟有了一些耐人寻味的表达。

他说,GPT 系列为何会出现推理能力,OpenAI 的研究者自己都搞不明白。

他们只知道,在不断测试中,人们忽然发现:从 ChatGPT 开始,GPT 系列开始出现了推理能力。

另外 Altman 在访谈中还说了这样石破天惊的一句:「AI 确实可能杀死人类」。

全球千位AI大佬联名呼吁暂停训练比GPT-4更强AI系统

而除了 Altman,人工智能教父 Geoffrey Hinton、比尔盖茨、纽约大学教授 Gary Marcus 最近也纷纷发出警示:AI 消灭人类,真的不是空谈。

OpenAI 研究员预测:AI 将知道自己是 AI

无独有偶,来自 OpenAI 治理团队的 Richard Ngo,也对两年后 AI 的发展程度进行了预测。

在此之前,他是 DeepMind 的 AGI 安全团队的研究工程师。

全球千位AI大佬联名呼吁暂停训练比GPT-4更强AI系统

根据 Richard 的预测,神经网络在发展到 2025 年底时将具备以下特性:

  • 拥有人类水平的态势感知,比如知道自己是神经网络

  • 在撰写复杂且有效的计划方面超过人类

  • 比大多数同行评审做得更好

  • 可以自主设计、编码并分发完整的应用程序

  • 在任何一项白领工作者可以在 10 分钟内完成的计算机任务上胜过任何人

  • 编写能获奖短篇小说,以及长达 5 万字的书籍

  • 生成连贯的 20 分钟电影

全球千位AI大佬联名呼吁暂停训练比GPT-4更强AI系统

不过,优秀的人类在以下几个方面仍然会做得更好(尽管速度要慢得多):

  • 写小说

  • 连续数天稳定地执行一个计划

  • 在科学研究上取得突破,比如定理的创新(尽管神经网络至少已证明了一个)

  • 与神经网络控制的机器人相比,完成典型的体力劳动任务

此处补充一下,通俗地讲,态势感知(situational awareness)是指个体对周围环境中发生的事件和情况的感知、理解和预测。这包括了解周围环境的动态变化,评估这些变化对自己和他人的影响,以及预测未来可能出现的情况。

有关态势感知在 AI 研究中的具体定义,可以参阅下面这篇论文:

全球千位AI大佬联名呼吁暂停训练比GPT-4更强AI系统

论文地址:arxiv.org/abs/2209.00…

Richard 表示,自己的预测其实更接近 2 年,但由于不同人会采用不同的评估标准,所以 2.75 年似乎更稳健。

此外,这里提到的「预测」是指,Richard 认为这个观点的可信度超过 50%,但不一定比 50% 高很多。

需要注意的是,预测并没有基于任何与 OpenAI 有关的特定信息。

网友翘首以待 GPT-5

相比于十分谨慎的大佬,网友们在体验了性能炸裂的 GPT-4 之后,显然已经迫不及待地等着 GPT-5 的到来了。

最近,关于 GPT-5 的预测,更是就像雨后春笋一般冒个不停……

全球千位AI大佬联名呼吁暂停训练比GPT-4更强AI系统

(非官方)

根据一个神秘团队的预测,GPT-5 将在 GPT-4 的基础上,带来一系列令人兴奋的功能和增强的性能,比如在可靠性、创造力和适应复杂任务方面的全面超越。

全球千位AI大佬联名呼吁暂停训练比GPT-4更强AI系统

· 个性化模板:根据用户的特定需求和输入变量进行定制,提供更个性化的体验。

· 允许用户调整 AI 的默认设置:包括专业性、幽默程度、说话语气等。

· 自动将文本转换成不同格式:如静态图像、短视频、音频和虚拟模拟。

· 高级数据管理:包括记录、跟踪、分析和共享数据,从而简化工作流程并提高生产力。

· 辅助决策:通过提供相关信息和见解,协助用户做出明智的决策。

· 更强的 NLP 能力:增强 AI 对自然语言的理解和响应,使其更接近人类。

· 集成机器学习:允许 AI 不断学习和改进,随着时间的推移适应用户需求和偏好。

作为过渡的 GPT-4.5

此外,这个团队还预测,作为过渡的 GPT-4.5 模型将在 2023 年 9 月或 10 月推出。

GPT-4.5 将建立在 2023 年 3 月 12 日发布的 GPT-4 的优势基础上,为其对话能力和上下文理解带来更多的改进:

  • 处理更长的文本输入

GPT-4.5 可能会在保持上下文和连贯性的同时处理和生成更长的文本输入。这一改进将提高模型在处理复杂任务和理解用户意图方面变的性能。

  • 增强的连贯性

GPT-4.5 可能会提供更好的连贯性,确保生成的文本在整个对话或内容生成过程中始终关注相关主题。

  • 更准确的回应

GPT-4.5 可能会提供更准确和上下文相关的回应,使其成为各种应用的更有效工具。

  • 模型微调

此外,用户可能也可以更加便捷地微调 GPT-4.5,从而更有效地定制模型并应用于特定任务或领域,客户支持、内容创建和虚拟助手等。

参照目前 GPT-3.5 和 GPT-4 的情况,GPT-4.5 很可能也会为 GPT-5 的创新奠定坚实基础。通过解决 GPT-4 的局限性并引入新的改进,GPT-4.5 将在塑造 GPT-5 发展过程中发挥关键作用。

参考资料:

futureoflife.org/open-letter…

chatgpt-5.ai/gpt-5-capab…

twitter.com/RichardMCNg…

全球千位AI大佬联名呼吁暂停训练比GPT-4更强AI系统

本网站的内容主要来自互联网上的各种资源,仅供参考和信息分享之用,不代表本网站拥有相关版权或知识产权。如您认为内容侵犯您的权益,请联系我们,我们将尽快采取行动,包括删除或更正。
AI教程

ChatGPT代码解释器:AI带来的新利器

2023-11-19 17:04:14

AI教程

muvtuber: AI电台的新尝试

2023-11-19 17:16:14

个人中心
购物车
优惠劵
今日签到
有新私信 私信列表
搜索