Redian新闻
>
马斯克等千名科技大佬呼吁,叫停超强AI研发6个月,是“求饶”还是对手的缓兵之计?

马斯克等千名科技大佬呼吁,叫停超强AI研发6个月,是“求饶”还是对手的缓兵之计?

公众号新闻
作者 | 冬梅、核子可乐
数千名科技大佬认为,我们已经有了 GPT-4,现在应该先缓一缓,别急着搞出比它更强大的新型 AI 系统。


3 月 22 日,生命未来研究所(Future of Life)向全社会发布了一封《暂停大型人工智能研究》的公开信,呼吁所有人工智能实验室立即暂停比 GPT-4 更强大的人工智能系统的训练,暂停时间至少为 6 个月。

据悉,生命未来研究所是一个非营利性组织,主要由马斯克基金会、总部位于伦敦的 Founders Pledge 集团和硅谷社区基金会资助。

千名科技大佬签署联名信,
呼吁暂定训练比 CPT-4 更强大的 AI

截止目前,马斯克、图灵奖得主 Yoshua Bengio、苹果联合创始人 Steve Wozniak、Stability AI 创始人兼 CEO Emad Mostaque、DeepMind 高级研究科学家 Zachary Kenton、AI 重量级人物 Yoshua Bengio(通常被称为“AI 教父”之一)和该领域研究的先驱 Stuart Russell 等上千名科技大佬和 AI 专家已经签署公开信。

附公开信原文:

关于叫停巨型 AI 实验的一封公开信 :

我们呼吁所有 AI 实验室,立即暂停对体量超过 GPT-4 的 AI 系统的训练(包括目前正在训练的 GPT-5),且暂停期至少 6 个月。

通过广泛研究和顶级 AI 实验室的调查认可,具备类人智能的 AI 系统很可能对社会和人类构成深远风险。正 如广受推崇的阿西洛马 AI 原则中所述,高级 AI 可能代表着地球生命史上一场影响深远的变化,应给予相应的关注和资源进行规划和管理。但遗憾的是,我们并没有看到这种级别的规划和管理。最近几个月来,AI 实验室陷入了一场失控般的技术竞赛,全力开发和部署一颗颗愈发强大的“数字大脑”,但就连创造者自己都无法理解、预测或可靠地加以控制

当代 AI 系统在常规任务上已经具备与人类相仿的能力,因此我们必须扪心自问:我们是否应该让机器用宣传和谎言填满信息渠道?我们真的应该推动一切工作自动化,包括目前已经令人满意的岗位吗?我们是否应当开发出最终可能超越自身、超越特种甚至取代我们的非人类思维?我们应该承担这份失去对文明掌控权的风险吗?很明显,这些问题的答案,不该由少数未经选举产生的技术领导者决定。只有当我们确信具有积极影响且风险可控时,才应当实际开发强 AI 系统。对这个问题的判断需要坚毅的决心,也要充分考虑到系统潜在影响等因素。

OpenAI 近期发布的 AI 声明指出,“必须承认,在开始训练未来系统之前,可能应该认真考虑开展独立审查。对于最前沿的探索,也应该对新系统的算力资源增长率做出限制。”我们完全认同这一判断,并坚信当下就是最恰当的时机。

因此,我们呼吁所有 AI 实验室,立即暂停对体量超过 GPT-4 的 AI 系统的训练,且暂停期至少 6 个月。这种暂停应当对外公开且可加验证,涵盖所有关键参与者。如果未能迅速实施暂停,政府应介入并强制要求其暂停

各 AI 实验室和独立专家则应把握这次暂停,共同开发和实施一套用于高级 AI 设计和开发的共享安全协议,并由外部独立专家进行严格审计与监督。这些协议应确保依其构建的系统具备无可置疑的安全性。我们并不是要全面叫停 AI 开发,只是想从目前这场危险的竞赛中退后一步,避免最终衍生出体量更大、更加不可预测的黑盒模型。

AI 研究和开发工作应当集中注意力,努力让目前最强大、最先进的系统变得更准确、更安全、更可解释、更透明、更稳健、更一致,也更加忠诚且值得信赖。

与此同时,AI 开发商必须与立法机构合作,加快开发出强大的 AI 治理体制。其中至少应当包括:专门负责 AI 事务的新型监管机构;监督和跟踪高性能 AI 系统及大量算力的机构;出处与水印系统,帮助区分真实与合成信息,同时跟踪模型泄露;强大的审计和认证生态系统;对 AI 造成的伤害进行责任回溯;为 AI 安全研究提供强大的公共资金支持;指派资源充足的机构应对 AI 将会在经济和政治层面造成的巨大破坏。

人类应当享受到 AI 造就的繁荣未来。在成功创建起强大的 AI 系统之后,我们才能平稳度过“AI 之夏”,静候金秋带来的累累硕果。但这一切的前提,是暂时叫停一切可能对社会造成灾难性影响的技术,这也是我们的当务之急。为社会提供过渡期、确保系统设计造福每个人,我们才能信心满满地迎接“AI 之秋”。

强大的 AI 让人又爱又恨

通过以上公开信不难看出,人们想要叫停更先进的 AI 系统的研发,无非是担心在缺乏有效监管的情况下,AI 发展太快会为人类社会带来一系列潜在隐患和危险。更重要的是,AI 太过强大了,发展到一定成程度时甚至人类都无法掌控它

自 ChatGPT、GPT-4 发布以来,关于 AI 与安全性的讨论声不断,甚至引发了不少科技大佬的深切担忧。

“人工智能教父”、英国计算机科学家 Geoffrey Hinton 接受 CBS 新闻的长篇采访中提到,人工智能正处于“关键时刻”。目前,人们经常提到 AGI 提高当前模型能力的预兆,但无论业界多么欢呼它的到来,或者它真正需要多长时间,Hinton 说,我们现在应该仔细考虑它的后果,这可能包括它试图毁灭人类的问题

3 月 25 日,OpenAI 创始人兼首席执行官 Sam Altman 在接受科技博客主 Lex Fridman 的采访时表态,他不会回避“人工智能可能杀死全人类”的说法。

在 Youtube 平台公布的视频中,MIT 研究科学家 Lex Fridman 在访谈中提到了人工智能研究者、LessWrong 研究所创始人 Eliezer Yudkowsky 的观点。Yudkowsky 此前指出“人工智能可能杀死所有人”,并认为,当人工智能发展为超级智能时,几乎无法与人类站在统一战线上。

关于超级 AI 威胁论的声音甚嚣尘上,这也就有了如今科技大佬们集体呼吁短暂叫停更先进的 AI 研发的呼声。

不过并不是所有科技大佬们都会更先进的 AI 持消极态度。有趣的是,距离“暴风眼(ChatGPT、GPT-4 等先进 AI 系统)"最近的 OpenAI 的首席执行官 Sam Altman 不在签署这封信的人之列。另外两位积极部署先进 AI 的科技巨头——谷歌和微软的 CEO Sundar Pichai 和 Satya Nadella 也都不在签署者之列。

此外,图灵奖得主、Meta 首席 AI 科学家 Yann LeCun 也在 Twitter 上发表了不同观点。Yann LeCun 表示:“我不会签署这个公开信,不同意这封公开信的内容。”

马斯克“手撕”GPT 的真正原因是什么?

在这次的公开信签署者中,马斯克的受关注程度最高。因为一直以来,无论是钻研自动驾驶还是脑机接口,马斯克留给外界的印象是一位总能走在科技最前沿“钢铁侠”。公然反对更先进的 AI 的研发,不符合他的一贯作风。

有媒体报道,实际上,马斯克反对的不是 AI,而是 OpenAI 和 GPT。

马斯克不仅是生命未来研究所的最初发起人,也是 OpenAI 公司的联合创始人之一。但他在 2018 年离开了 OpenAI 的董事会,并撤销了一大笔赞助款。

美国《财富》杂志当时报道称,离开的原因是因为马斯克虽然支持人工智能,但特斯拉智能驾驶技术与 OpenAI 之间有“潜在利益冲突”。

还有报道称,马斯克在离开前提出过由他本人执掌 OpenAI 运营的建议,但遭到了拒绝。这就不难理解,为什么离开 OpenAI 后,马斯克就一直将矛头对准 OpenAI 以及和它有关的一切。

除了在公开场合发表言论攻击 OpenAI 外,马斯克还将手深入了 OpenAI 内部挖走他们的员工。2022 年离职的特斯拉自动驾驶主管 Andrej Kapathy 就是 OpenAI 最优秀的人才之一。

有网友认为,上述举动表明,斯克并不是真的反对更先进的 AI 技术,而是痛恨这项技术先入了别人之手,而自己只能成为旁观者。

对于这次千人署名事件, 金沙江创投管理合伙人朱啸虎在朋友圈发表了自己的看法,“其实是为竞争对手争取时间,OpenAI 的迭代速度太快了。Google 的搜索比对手好 20% 就占据了 90% 的搜索市场份额。OpenAI 的影响会更广泛,所有的上层应用都希望使用优更强大 AI 赋能的云服务。更不用说微软本来就具有强大优势的前端 Office 应用。只能寄希望于 OpenAI 会像自动驾驶那样发展到某个阶段会遇到难以克服的瓶颈”。

很多人可能会认为这次的集体呼吁只是一场“贼喊捉贼”的闹剧,毕竟签名者中就有正亲自参与 AI 模型研究和部署的人士,比如 Stability AI 的 CEO Emad Mostaque。该公司去年发布了文本到图像模型 Stable Diffusion。

但作为最了解 AI 底层技术细节的一群人,考虑到加速 AI 开发所带来的高风险,他们或许只有两条路可走:要么是在口头上表示明确反对和抗议;要么是一边口头抗议,一边向这些专心搞 AI 的从业者施压,要求他们尽可能阻止局面失控。

参考链接:

https://futureoflife.org/open-letter/pause-giant-ai-experiments/

https://www.reuters.com/technology/musk-experts-urge-pause-training-ai-systems-that-can-outperform-gpt-4-2023-03-29/

今日荐文


高盛预警!疯狂的AIGC将抢走全球3亿人饭碗,Open AI CEO : AI 还可能毁灭人类

马斯克对 Twitter 估值仅 200 亿美元,接管半年较收购价腰斩,网友:什么都不做,赔钱最慢

Twitter部分源代码泄漏、疑遭离职员工报复:马斯克要求GitHub交出所有上传、下载人员名单

美团被爆严抓考勤:迟到3次扣50%绩效;百度回应文心一言文生图功能争议;26岁年薪百万,华为最新天才少年曝光 | AI一周资讯

集成GPT-4的编程神器来了,GitHub发布Copilot X:编程30年,突然就不需要手敲代码了?!

ChatGPT联网终极进化!插件系统正式开放、无需编码就能上手,网友:这是我见过最疯狂的系统

这家芯片大厂裁掉了整个中国研发团队,一个都不留!赔偿 N+3



你也「在看」吗? 👇

微信扫码关注该文公众号作者

戳这里提交新闻线索和高质量文章给我们。
相关阅读
危险!立即暂停!马斯克等超千人紧急呼吁危险!立刻停下所有大型AI研究!马斯克等千名企业家科学家紧急呼吁!比已知更可怕,马斯克等1000多科学家,叫停AI研发硬核观察 #955 马斯克等人呼吁暂停训练更强大的 AI8点1氪:马斯克、苹果联合创始人等千名科技人士发公开信叫停人工智能开发;钟薛高推出3.5元雪糕;理想回应雷达在无人陵园显示全是人立即暂停训练更强大的AI!马斯克等超2300人签署联名信,科技大佬在担心什么;74页起诉书起底赵长鹏在美往事 |一周国际财经“把实验停下来”!马斯克等千名科技人员签署公开信:呼吁暂停巨型AI实验为什么马斯克、图灵奖得主等千名从业者联名叫停大型AI研究?救治千名癌症患者,牛津博士秦才东是“药神”还是“骗子”?GPT-5别整了!马斯克Bengio等联名疾呼:所有先进AI系统暂停研发6个月“暂停GPT-5!”马斯克等千人联名叫停强AI研发:它太可怕了比已知更可怕…马斯克等1000多科学家发公开信要叫停AI研发多多八卦王室《备胎》: (2) 横看成岭侧成峰,远近高低各不同想把AI关进笼子里?千名科技人士发起联名信,呼吁暂停AI研发半年一周资讯|罗永浩淘宝直播间交易额破纪录;马斯克等千名科技人士联名喊停GPT训练;腾讯视频号将推出创作分成计划...各界大佬呼吁:停止研究AI!它们将抢走人类3亿岗位,白领受伤最深?!马斯克等为何呼吁暂停GPT-5训练?AI已成中美战略竞争制高点!中国需从九方面紧急应对!马斯克等千名大佬联名疾呼暂停先进AI训练,周鸿祎:不发展才是最大的不安全GPT-5恐被叫停!马斯克、图灵奖得主等千名专家呼吁暂停超强AI研发,至少6个月每天对老婆大人上下其手。。。“救救人类”!马斯克等千人联名反对AI实验!从千名专家呼吁暂停超强AI研发,到GPT-4老板直言AI可能会杀死人类!人工智能到底怎么了!昨天俺LD跟儿孙去威斯勒Whistler滑雪 孙女去Cypress滑雪古巴行 (1) - 初识古巴,世外桃源 Vinales想当业主协会会长的都是什么人?人工智能失控?马斯克带头紧急叫停AI训练,数千名科技大佬响应...马斯克与全球千名科技人士联名叫停AI开发,转头却购入1万块GPU?不要作死!效仿爱因斯坦末日警告信,千名科学家联名呼吁停止AI训练和研究立刻暂停!马斯克等上千名科学家紧急发声,什么情况?A股最火赛道跳水突发! 马斯克等大咖提交联名信叫停AI, 他们在怕什么?我国短视频用户规模达10.12亿;货拉拉向港交所提交上市申请;马斯克等千名科技人士呼吁暂停更强AI开发……GPT真正的威胁并不是马斯克联手上千名科技大佬与专家说的那些牛军:邓小平为什么强调,中美保持友好关系不是权宜之计?马斯克等人呼吁暂停AI研发;专家称60岁退休反而是浪费;茅台推出酒瓶装冰淇淋;理想回应雷达在陵园内显示人影...比已知更可怕,马斯克等1000多科学家,叫停AI研发,并签署公开信
logo
联系我们隐私协议©2024 redian.news
Redian新闻
Redian.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Redian.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。