Redian新闻
>
GPT-5恐被叫停!马斯克、图灵奖得主等千名专家呼吁暂停超强AI研发,至少6个月

GPT-5恐被叫停!马斯克、图灵奖得主等千名专家呼吁暂停超强AI研发,至少6个月

科技新闻



  新智元报道  

编辑:编辑部
【新智元导读】GPT-4强到发指,不止群众们恐慌,今天,全世界的AI大佬们也出手了!千人发表联名信,呼吁所有人暂停训练比GPT-4更强的AI。

就在刚刚,网上曝出了一封千位大佬的联名信,要封杀所有比GPT-4强的AI!
在这封联名信上,超过1000位大佬呼吁——我们应该立即停止训练比GPT-4更强大的AI系统,暂停期至少6个月。
目前签名的有,图灵奖得主Yoshua Bengio、Stability AI首席执行官Emad Mostaque、苹果联合创始人Steve Wozniak、纽约大学教授马库斯、马斯克,以及「人类简史」作者Yuval Noah Harari等等。
看看这根本看不到头的签名,大佬含量过高了。
能够集齐一千多位大佬的签名,想必这项联名已经准备多时了。
不过,同样作图灵奖得主的Yann ‍‍LeCun并没有签署:「我不同意这个前提。
另外,签名中还出现了一个所谓的「OpenAi CEO」,但根据马库斯和一众网友的推测,这应该不是本人签的名。整件事非常扑朔迷离。
截止发稿前,他还特地@了一下Sam Altman确认消息真假。

大佬联名:叫停比GPT-4强的AI

公开信表示,大量研究表明,得到顶级AI实验室的认可、具有和人类竞争智能的AI系统,可能对社会和人类构成深远的风险。
正如广泛认可的Asilomar AI原则中所述,高级AI可能意味着地球生命史上的深刻变化,我们应该投入相应的考量和资源,对之进行规划和管理。
不幸的是,到现在为止,还没有任何人采取行动。
最近这几个月,全球的AI实验室已经完全失控了,它们疯狂地开展AI竞赛,来开发和部署更强大的AI,而没有任何人可以理解、预测、控制这些AI,连它们的创造者都不能。

如今,AI系统在一般任务上已经变得和人类一样有竞争力,我们必须扪心自问:

是否应该让机器用宣传和谎言充斥我们的信息渠道? 是否应该让所有的工作都变得自动化,即使是令人满意的工作?是否应该发展可能某一天会超越我们、淘汰我们、取代我们的非人类智能?是否应该冒险失去对人类文明的控制?

任何未经选举产生的技术领导者,都没有权利做出如此重要的决定。
只有当我们确信,这种AI的影响是积极的、风险是可控的时候,才应该开发强大的AI系统。而且,我们必须有充分的理由相信这一点,潜在的影响越大,我们就更加需要确信这一点。
OpenAI最近关于通用人工智能的声明指出,「从某个时间点以后,在开始训练未来的系统之前,进行独立的审查可能非常重要,而对于创建新模型所用算力的增长速度,也应该有所限制。」
我们同意这一点,而那个时间点,就是现在。
因此,我们呼吁所有AI实验室立即暂停训练比GPT-4更强大的AI系统,至少6个月。
这种暂停应该向所有人公开,所有人都可验证,并且要涉及所有关键成员。如果不能迅速暂停,就应该让政府介入。
在这6个月内,所有AI实验室和独立学者都应该合力开发一套共享安全协议,用于高级AI的设计和开发。协议完成后,应该由独立的外部专家进行严格的审计和监督。这些协议必须确保这些AI系统毋庸置疑的安全。
这并不是说,我们要绝对暂停AI的开发,只是说,我们应该从危险的竞赛中退后一步,转向具有涌现能力的、更大的、不可预测的黑箱模型。
所有的人工智能研究和开发,都应该重新聚焦于这一点——让当如今最强大的SOTA模型更加准确、安全、可解释、透明、稳健、对齐,值得人类信赖,对人类忠诚。
与此同时,开发者必须与政策制定者合作,大幅加快开发强大的AI管理系统。

系统至少应该包括:

  • 专门负责监管AI的机构

  • 出处和水印系统,从而帮助区分真实与生成的内容,并且能够跟踪模型的泄漏

  • 强大的审计和认证系统

  • 在AI造成伤害后,明确谁该承担责任

  • 为AI安全技术研究提供强大的公共资金

人类可以享受AI带来的繁荣未来。在成功创建了强大的AI系统后,我们可以享受「AI之夏」,收获回报,设计上述系统,以造福所有人,给全人类一个适应的机会。

现在,我们的社会已经暂停其他可能造成灾难性影响的技术。对于AI,我们也该如此。
让我们享受一个漫长的AI夏天,而不是毫无准备地进入秋天。

很快,这封千位大佬签署公开信就引发了舆论的轩然大波。
支持的人认为,对于AI的恐慌是合理的,因其训练效率太高,智能的水平每天都在膨胀。
反对的人甚至贴出了爱迪生指使人画的交流电害死人的宣传海报,认为这不过莫名的指控,是别有用心的势力在误导不明真相的群众。

Sam Altman,态度耐人寻味

从最近发生的事来看,这封信的到来,可谓是千呼万唤始出来。
从去年11月底,ChatGPT仿佛叩响了发令枪,全世界的AI机构都在疯狂冲刺,卷到红了眼。
而「始作俑者」的OpenAI,脚步也丝毫没有放慢,联合着金主爸爸微软,它隔一阵就给我们来一个暴击。
先进的AI工具带给人们的恐慌,一波又一波冲击着所有人。
今天,大佬们终于出手了。
而在昨日公开的访谈中,Sam Altman的话中,竟有了一些耐人寻味的表达。
他说,GPT系列为何会出现推理能力,OpenAI的研究者自己都搞不明白。
他们只知道,在不断测试中,人们忽然发现:从ChatGPT开始,GPT系列开始出现了推理能力。
另外Altman在访谈中还说了这样石破天惊的一句:「AI确实可能杀死人类」。
而除了Altman,人工智能教父Geoffrey Hinton、比尔盖茨、纽约大学教授Gary Marcus最近也纷纷发出警示:AI消灭人类,真的不是空谈。

OpenAI研究员预测:AI将知道自己是AI


无独有偶,来自OpenAI治理团队的Richard Ngo,也对两年后AI的发展程度进行了预测。
在此之前,他是DeepMind的AGI安全团队的研究工程师。
根据Richard的预测,神经网络在发展到2025年底时将具备以下特性:
  • 拥有人类水平的态势感知,比如知道自己是神经网络
  • 在撰写复杂且有效的计划方面超过人类
  • 比大多数同行评审做得更好
  • 可以自主设计、编码并分发完整的应用程序
  • 在任何一项白领工作者可以在10分钟内完成的计算机任务上胜过任何人
  • 编写能获奖短篇小说,以及长达5万字的书籍
  • 生成连贯的20分钟电影
不过,优秀的人类在以下几个方面仍然会做得更好(尽管速度要慢得多):
  • 写小说
  • 连续数天稳定地执行一个计划
  • 在科学研究上取得突破,比如定理的创新(尽管神经网络至少已证明了一个)
  • 与神经网络控制的机器人相比,完成典型的体力劳动任务
此处补充一下,通俗地讲,态势感知(situational awareness)是指个体对周围环境中发生的事件和情况的感知、理解和预测。这包括了解周围环境的动态变化,评估这些变化对自己和他人的影响,以及预测未来可能出现的情况。
有关态势感知在AI研究中的具体定义,可以参阅下面这篇论文:

论文地址:https://arxiv.org/abs/2209.00626
Richard表示,自己的预测其实更接近2年,但由于不同人会采用不同的评估标准,所以2.75年似乎更稳健。
此外,这里提到的「预测」是指,Richard认为这个观点的可信度超过50%,但不一定比50%高很多。
需要注意的是,预测并没有基于任何与OpenAI有关的特定信息。

网友翘首以待GPT-5

相比于十分谨慎的大佬,网友们在体验了性能炸裂的GPT-4之后,显然已经迫不及待地等着GPT-5的到来了。
最近,关于GPT-5的预测,更是就像雨后春笋一般冒个不停……

(非官方)
根据一个神秘团队的预测,GPT-5将在GPT-4的基础上,带来一系列令人兴奋的功能和增强的性能,比如在可靠性、创造力和适应复杂任务方面的全面超越。
· 个性化模板:根据用户的特定需求和输入变量进行定制,提供更个性化的体验。
· 允许用户调整AI的默认设置:包括专业性、幽默程度、说话语气等。
· 自动将文本转换成不同格式:如静态图像、短视频、音频和虚拟模拟。
· 高级数据管理:包括记录、跟踪、分析和共享数据,从而简化工作流程并提高生产力。
· 辅助决策:通过提供相关信息和见解,协助用户做出明智的决策。
· 更强的NLP能力:增强AI对自然语言的理解和响应,使其更接近人类。
· 集成机器学习:允许AI不断学习和改进,随着时间的推移适应用户需求和偏好。

作为过渡的GPT-4.5

此外,这个团队还预测,作为过渡的GPT-4.5模型将在2023年9月或10月推出。
GPT-4.5将建立在2023年3月12日发布的GPT-4的优势基础上,为其对话能力和上下文理解带来更多的改进:
  • 处理更长的文本输入
GPT-4.5可能会在保持上下文和连贯性的同时处理和生成更长的文本输入。这一改进将提高模型在处理复杂任务和理解用户意图方面变的性能。
  • 增强的连贯性
GPT-4.5可能会提供更好的连贯性,确保生成的文本在整个对话或内容生成过程中始终关注相关主题。
  • 更准确的回应
GPT-4.5可能会提供更准确和上下文相关的回应,使其成为各种应用的更有效工具。
  • 模型微调
此外,用户可能也可以更加便捷地微调GPT-4.5,从而更有效地定制模型并应用于特定任务或领域,客户支持、内容创建和虚拟助手等。
参照目前GPT-3.5和GPT-4的情况,GPT-4.5很可能也会为GPT-5的创新奠定坚实基础。通过解决GPT-4的局限性并引入新的改进,GPT-4.5将在塑造GPT-5发展过程中发挥关键作用。
参考资料:
https://futureoflife.org/open-letter/pause-giant-ai-experiments/
https://chatgpt-5.ai/gpt-5-capabilities/
https://twitter.com/RichardMCNgo/status/1640568775018975232

微信扫码关注该文公众号作者

戳这里提交新闻线索和高质量文章给我们。
来源: qq
相关阅读
俄乌之战的前线战争推进到俄罗斯本土!圣彼得堡、奥廖尔、斯摩棱斯克、图拉、布良斯克、马林卡区域,六个州遭乌军空袭!停!停!停!MBTA再次全面暂停服务?!波士顿居民抱怨:这地铁还能修好了吗?突发!比弗利发生泥石流,至少6栋房屋被冲垮,15人无家可归,州长宣布南加州进入紧急状态!专家呼吁监管GPU性能,不让AI成为脱缰野马活动预告丨医科院肿瘤医院百名专家即将线下义诊,专家名单和具体时间看这里!新加坡对中国免签后,还有护照有效期最少6个月的规定吗?OpenAI CEO本周访韩,或与SK集团讨论AI芯片合作;日本芥川奖得主坦言:小说5%内容由ChatGPT撰写丨AIGC日报芥川奖得主九段理江称,获奖作品中5%内容“一字不差”地取自ChatGPT | 文化周报刚刚!这类大量招收留学生的热门课程被叫停,24所学院联合发声!大年初一违规开工!宾臣墟区86街游民所无施工许可证被叫停突发,至少40人死亡!俄军重大胜利,普京发声花了14万美元,调研2778名专家,这么大手笔能看到AI的未来?离谱!中国女留学生“卡鱼刺”就医花$12万:6名专家会诊+全麻手术!癌症复发+脑转移,求助国际知名专家真的是一线生机吗?中国留学生喉咙卡刺,紧急调动6名专家手术,醒来收到账单后傻眼了...芝加哥开Uber?远离这些地方 本月至少6名司机被“乘客”持枪抢劫 有人受伤美44年悬案侦破!18岁少女住摩铁遇"连环杀人魔",他狂杀至少6女美44年悬案侦破,18岁少女住摩铁遇"连环杀人魔"!他狂杀至少6女莫斯科袭击最新:至少60人死亡,145人受伤,美国曾向俄方发出警报!AGI争论燃爆!奥特曼、马斯克、杨立坤、Hinton一众大佬关于“AGI何时降临?”的讨论
原创公众号
新手跨行做茶饮,他是如何做到单店年入800万?会说话就能搞编程,听完李彦宏三大开发神器,我退了所有编程课组织出海人才先行,中国企业出海都有哪些「前」顾之忧?「联想系」大模型公司「诺谛智能」完成近亿元Pre-A轮融资,武岳峰科创领投|36氪首发职业教育平台「天天学农」获C+轮融资,亚洲影响力投资基金二期投资|36氪首发“一个月已抄底3次”,女子观望两个月踩雷:“跌到超乎想象”!囤日元理财突然火了,现在是好时候吗?第五大银行被华裔女富豪“拖下水”,“若不救就会倒闭,继续救则国库枯竭”,这国央行已注资1700亿元!背后涉一桩惊天大案央行最新发声!“防止利率过低导致内卷式竞争加剧和资金空转”,还谈了M2突破300万亿元......6600根金条、价值1300万元各种货币,这起“黄金大劫案”告破!加拿大警方:5人被捕,4人仍被通缉事发知名超市,有女顾客竟这样做!还有专门教程?网友:真的很讨厌明星资本看透了蔚来上门按摩的女技师们,要IPO了茅台董事长说早中晚都要喝酒,他的肝顶得住吗代理人战争越打越凶。。王建林,被查!茅台大幅调价男子高铁上抱着女儿进厕所,半小时不出来,乘务员破门后怒了:畜牲!突发重大刑案,嫌犯在逃!她离异带两娃,63岁健身,66岁一口气能拉10个引体!我服了....年轻人开始整顿婚礼了"直接给PR"! 男子英勇挡凶手 总理亲授永居! 30岁难民为救人丧命 曾接济华人朋友"毫无幸福感"! 大批华人退籍回流 小哥搬来后悔了 加拿大人举家出走吓死! 女子推着尸体进银行贷款 狂喊"叔叔签字" 惊悚一幕引众怒!首个百万级NOA软件Tier 1或诞生!高阶智驾第一梯队来势汹汹抓住高通红利,车联天下去年超7千万净利,利润率却不到4%「舱驾智能」2024年度评选正式启动,企业自主申报进行中侨界“她力量”相聚上海彩云易散琉璃脆,世间好物不坚牢。。。。。外交部:欢迎布林肯近日访华发展工业软件,打造中国的“超级缝合怪”。
logo
联系我们隐私协议©2024 redian.news
Redian新闻
Redian.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Redian.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。