Redian新闻
>
OpenAI政变背后是科学家创始人的悲歌
avatar

OpenAI政变背后是科学家创始人的悲歌

babyy565
楼主 (北美华人网)
Original 好奇心君 未来预言机 Posted on 广东 收录于合集 #未来/变化/科技 去年11月突然推出ChatGPT震惊世界的OpenAI,在整整一年后以闪电解职CEO再次震惊世界。 有不少人以为这拿的是乔布斯的剧本,错了,这其实是天才科学家奋力一击的故事。 OpenAI的灵魂人物不是CEO Sam Altman,而是其创始人之一、首席科学家Ilya Sutskever。 我们先看看水面上的冰山一角,然后再潜入水下看看合订本。 OpenAI的董事会共6人。 三人是公司的高管: Sam Altman,OpenAI前CEO,犹太人,原Y Combinator孵化器的总裁。Sam Altman的更多故事见《不懂新冠的AI大佬不是亿万富翁》《美国防部长指导新冠防疫,我们该如何纪念吴老师》。 Greg Brockman,OpenAI前董事会主席兼总裁,美版支付宝Stripe的前CTO,《不懂新冠的AI大佬不是亿万富翁》里提到的天才青年、Stripe的CEO Patrick Collison的副手。Sam Altman曾投资过Stripe。所以,Greg Brockman算是Sam Altman的小弟,属于工具人。 Ilya Sutskever,OpenAI创始人之一,首席科学家。 三名外部独立董事: Adam D''Angelo,美版知乎Quora的CEO,目前也在公司内部搞类似ChatGPT的大模型Poe。 Tasha McCauley,一个女性创业者,前GeoSim CEO,好莱坞明星囧瑟夫的老婆。 Helen Toner,乔治敦大学一个研究中心的主管。 首席科学家Ilya Sutskever先和三位独立董事谈话,说服了他们,凑够了四票。然后在Sam Altman和Greg Brockman两人不在场的情况下,开了一次董事会,做出决定炒了Sam Altman。 然后11月16日周四晚上,Ilya Sutskever发短信给Sam Altman,约在周五中午谈话。周五中午,双方连入了Google在线视频会议,Ilya Sutskever一方四人都在。他们简短地通知Sam董事会决议,说他已经被炒了。然后结束会议。 稍后,Ilya Sutskever再发短信给Greg Brockman要求打一个quick call简短的电话。双方随即连入Google视频会议。Ilya Sutskever通知Greg他已被解除董事长职务,以及Sam Altman也已被解雇。 整个过程闪电般地结束,非常干净迅速,没有一点拖泥带水。 随后,Ilya Sutskever在OpenAI召开全体员工会议,宣布董事会决定。CTO Mira Murati 成为临时CEO。 在全体员工会议上,有人问:这是一场政变吗? Ilya Sutskever回答:你可以这么说。但这只是“the board doing its duty董事会在尽自己的责任”。 但是,事情还没完。 不到24小时,OpenAI的最大几个投资人,包括投了100亿美元的微软、Thrive Capital、老虎基金(Tiger Global Management)、红杉资本,都对OpenAI施予巨大压力,要求让Sam Altman回归复职。 OpenAI董事会受到了巨大的压力。 这些投资人为什么想让Sam Altman回归?因为他们在OpenAI身上下了很大的赌注。 微软,真金白银投了100亿美元,自己能否再次成为科技界的霸主,全靠OpenAI了。 Thrive Capital、老虎基金、红杉资本,不但投资了OpenAI,期待其成为AI领域的万亿规模的霸主,从而自己能狂赚一笔,而且还投了一大堆在OpenAI的生态体系内的创业公司,就等着OpenAI的应用市场一开,就能吹出一堆AI小独角兽。 这就像苹果的应用商店一开门,手机app就变成了风口上的猪。最近六七年,美国大部分新兴的科技公司都是做手机app的。 所以,这些投资人们都疯狂了,迫不及待地呼喊着:再来一次!再来一次! 那些在OpenAI的生态体系下存活的创业公司们更是惊恐,要是你OpenAI发生的变动不符合自己业务的发展方向,自己公司就死翘翘了。所以,有人声嘶力竭地在社交媒体上批评咒骂Ilya Sutskever,要他赶紧滚蛋,把OpenAI交给Sam Altman。为啥,阻碍别人发财,犹如杀人亲生父母。 那为什么这些人觉得Sam Altman能实现他们的想法,而首席科学家Ilya Sutskever不能实现他们的想法? 这就要从Ilya Sutskever的老师Geoffrey Hinton说起。Geoffrey Hinton教授的更多故事见《贫穷和阶级滑落成常态,新冠AI再暴击,大神荐社会主义》。 Geoffrey Hinton,英国人,1947年出生。从小喜欢木工。但是为了谋生而去学习计算机,1978年获得爱丁堡大学的人工智能博士学位后,去了美国继续在学术界耕耘,后来因为对里根时代的政治理念破灭而移居加拿大,之后长期担任多伦多大学的计算机科学教授。 在人工智能领域,他经过长期研究后,选择的是神经网络的技术路线。 但是,这个路线受限于当时计算机计算能力小、数据量小,出成果一直都很慢,因此一直不是热门方面,并不被外界看好。因此,喜欢看排名、追求风口的博士生都直接无视了这个方向,和教授套瓷都不往这个方向靠。 Hinton教授自己说,到了1993年,46岁的他已经彻底死心了。研究进展缓慢,也没什么钱,生活也不太如意,中年两次丧偶,独自抚养两个孩子。 他就是希望他的博士生们能继续坚持神经网络的方向,也许100年后会有突破。 历史的进程比他预料得快得多。 10多年后,随着计算机的计算能力的高速提升,人类可获得的数据量的高速增长,神经网络方向的研究进展开始逐渐苏醒。 这个时候,Hinton教授招了两个博士生,Alex Krizhevsky和Ilya Sutskever。 这两位博士生都是俄罗斯出生的,他们没有像其它寻常人一样选择其它热门领域,而是投奔了冷门的Hinton教授门下,显示出了他们非同寻常的个性。果然,这一点在未来的发展中也得到了验证。他们也各自做出了非同寻常的决定。 他们三人在2012年的时候完成了一个新型神经网络的开发,叫卷积神经网络,命名为AlexNet。我非常怀疑这是用其中一位博士生Alex Krizhevsky的名字来命名的,但是我没有证据。 这个AlexNet取得了重大突破,对图片识别的能力大大超过了人工智能其它技术路线的技术。当时有一项人工智能大赛ImageNet,其它技术的识别错误率大约是30%,而AlexNet的错误率提高了差不多一倍,达到15.3%,从而在2012年9月30日一举拿下ImageNet大赛的冠军。 余凯博士当时在百度领衔人工智能研发工作,立刻意识到了这项突破的重要性,于是联系Hinton教授希望合作,先提供100万美元研究经费。 随后几家美国公司也找上门来,同样希望合作,甚至提出希望独家合作。 于是,Hinton师徒三人就成立了一家皮包公司DNN Research,公司只有他们三个人,没有业务,没有产品,没有收入。让大家自由出价,价高者得。 参加这场竞拍的有四家公司,百度、Google、微软、刚刚成立一年的英国人工智能公司DeepMind。 余凯博士代表百度首先报价1200万美元。 然后价格持续上升,随之变成了Google和微软的对决。 两家都志在必得,都愿意继续加价。 但是Hinton教授说,够了够了,你们太疯狂了,我们就3个人,你们竟然愿意炒到4400万美元。 当时Hinton师徒觉得,Google更有道德一些,毕竟“不作恶”写进了公司章程。那就接受Google的招安吧。 他们没想到谷歌与美国国防部进行的人工智能研究合作项目Project Maven在2018年曝光,员工们抗议,拿出公司章程“不作恶”条款要求公司管理层解释。谷歌管理层很快将“不作恶”这条公司章程删除。 当时,Hinton师徒拿到钱后,打算三人平分,每人1466万美元。两位博士生纷纷坚持,Hinton老师您应该拿40%,我们各30%就好了。随后三人就高高兴兴去Google上班了。Google随之设立了一个新部门:Google Brain谷歌大脑。 Google和微软一看对方准备在人工智能领域投入这么大手笔,也开始了在这一领域的军备竞赛。 在那次竞拍后的一年多后的2014 年1月26日,Google以6.5亿美元把四位竞拍者中的DeepMind也收购了。当时DeepMind的员工数是50人。算下来,人均价格相当于Hinton师徒的88折。 随后,Google派了Google Brain即Hinton师徒三人去帮助DeepMind。 DeepMind很快取得举世瞩目的成绩。 2014年开始开发人工智能围棋软件 AlphaGo。2016年AlphaGo击败人类世界冠军李世石。 2019年,专门用来玩星际争霸的AlphaStar以10:1战胜人类职业玩家,在团队协作人工智能领域取得突破。 2018年,用于预测蛋白质折叠结构的AlphaFold取得突破,这个方向上的科学问题基本得到解决。其影响是,一些使用基因测序仪器对蛋白质测序然后构建结构的科研人员开始要转型。据说这是某女博士回国的原因之一,这个不了解,纯八卦。 DeepMind的管理层认为自己的技术过于强大,不应该让私人公司独占,而应该属于全人类,这对整个人类社会都更有益。而在隶属于Google的这几年里,Google的表现并不能让DeepMind满意,于是这几年来,他们一直在寻求从Google中独立出来。 Hinton师徒三人也有类似的想法。 Hinton教授是2023年从Google退休。 博士生之一的Alex Krizhevsky在2017年从Google退休,不再涉足人工智能。单算他加入Google前卖公司拿到的1320万美元也够生活了。因为一般美国人,一辈子挣的钱不会超过100万美元。 博士生之一的Ilya Sutskever的变动更早一点,是在2015年。 Ilya Sutskever是1985年出生于俄罗斯,5岁随家人移居以色列,所以应该是犹太人,成年后又随家人移居加拿大,继而加入Hinton教授门下。 Ilya Sutskever也是个生活很简单的人,和乔布斯、马斯克、扎克伯格类似,同样的衣服买一打轮着穿,吃喝尽可能简单,要能快速完成,家里家具越少越好,一个床垫就能睡觉。应酬、晚宴、party、舞会邀约很多,但是基本都不去。 所以,师徒三人组里,还干得动、还能干的,就剩下Ilya Sutskever了。 而硅谷一帮大佬,看着谷歌垄断了人工智能的人才,就想着要搞事情。你谷歌吃独食可不好,我们也要分一杯羹。 于是,2015年,硅谷一众大佬就把Ilya Sutskever约出来吃饭。这些人包括风投之王Peter Thiel,特斯拉的马斯克,当时还是孵化器Y Combinator总裁的Sam Altman,LinkedIn创始人Reid Hoffman,本次政变中也有出场的Stripe的CTO Grey Brockman。 在这个饭局上,大家谈妥了。 Ilya Sutskever从谷歌出来,围绕他打造一个属于他的人工智能实验室OpenAI。让AI普及化,让硅谷所有人都能用上AI,不要让谷歌垄断,造福全人类。这个OpenAI就设为非盈利组织。 为什么这个OpenAI要设为非盈利组织? 这涉及到硅谷一个知名的大悲剧。维基百科的创始人Jimmy Wales,设立维基百科的时候,对公司治理不熟悉,想着属于全人类的百科全书应该属于有公信力的机构,于是就把自己的公司设立为非盈利组织。这下坏了,由于公司治理法规的限制,非盈利组织只能靠捐款存活,融资困难,上市无望。因此,虽然维基百科发展迅速成为世界第一大百科网站,但是其创始人和高管层还是穷得响叮当。Jimmy Wales痛不欲生,多次痛哭搞砸了公司治理架构。那也是,其它的后辈小弟们搞的在线订酒店、在线打车、在线交友、在线实名交友、在线匿名交友、在线同性恋匿名交友、甚至在线黄色小网站什么的,统统火红火红,上市赚大钱,财富自由,自己却被这非盈利组织的架构困死。 所以,有了维基百科这个反面案例在,所有硅谷的人都不会使用非盈利机构这个架构。因为赚不了钱。 而2015年的OpenAI为什么要故意设为非盈利机构,就是因为当时想的是让OpenAI去专心搞研发,搞出来了服务全人类,大家一起用,避免像Google那样垄断。 刚满30岁的Ilya Sutskever非常认可这一使命,就干了。 然后,马斯克捐了1亿美元,其它人凑了3000万美元,合计1.3亿美元当启动经费。马斯克与Sam Altman同为OpenAI联席董事长。 干活的,就Ilya Sutskever一个人,他再去招人组团队。 所以,当时的情形就是十个人围观,看着Ilya Sutskever一个人干活。 也没办法,当时也就Ilya Sutskever一个人懂这活是怎么干的。 当时定的是Ilya Sutskever在OpenAI的待遇是年薪190万美元,和他在谷歌时差不多。从谷歌辞职时,谷歌大力挽留,愿意将Ilya Sutskever的待遇提高到400万美元乃至500万美元,只要他愿意留下来。 Ilya Sutskever说不,我要去创立一个技术不被私营企业垄断的新平台。 所以说,对于Ilya Sutskever,当初2012年谷歌买Hinton师徒的公司时,生活简单的Ilya Sutskever认为他已经拿到了足够的金钱。2015年离开Google、拒绝Google的500万美元年薪去一个未来不确定的非盈利性质的初创小平台,完全不是金钱驱动,而是有着更远大的目标。 之后,OpenAI的发展并不是一帆风顺的。 Ilya Sutskever的头发掉得也很快。 因为Hinton师徒选择的这条路,有点漫长,出成果都挺慢的。其它人在掌握了AlexNet架构后,提出了众多的改进路线。例如一种叫人类反馈强化学习(RLHF)。举个例子,人工智能目前会算1+1=2,但是不会算5*4=20。那人类反馈强化学习就会强迫人工智能先把5*4=20记下来,你不理解也不管,总之以后我问你5*4等于多少你必须回答等于20。其它人把这种方法一实施,短期的效果非常好,立刻在各项评测里将Hinton师徒的技术打败。Hinton师徒则认为这属于人工激素催肥,不合理,应该让人工智能慢慢学,自己理解,这样才会有真正的发展。 所以OpenAI从创立的2015年到2019年都进展缓慢。而马斯克等大佬捐的1.3亿美元就花完了。 怎么办?两位联席董事长发生了分歧。马斯克仍然坚持要继续非盈利的路线。而Sam Altman主张要转型,这样研发下去是无底洞,要转型走传统私营公司的模式,融资干活,然后盈利,然后上市,然后成为AI霸主。 两方随后一拍两散,马斯克撒手。Sam Altman成为董事长。然后在OpenAI下面成立一个常规的私营子公司,由私营子公司去融资、赚钱,然后OpenAI维持非盈利的公司治理架构。 在2019年转型后,OpenAI开始大规模融资。7月份开始,微软注资10亿美元,其它风投公司Khosla Ventures、LinkedIn创始人的个人基金Reid Hoffman Foundation、Matthew Brown Companies等等竞相跟进。然后之后的每一年都进行一次或两次融资。在2023年年初的第七次融资时,微软大手笔一挥,投下100亿美元重注。这些年来,微软把能买的OpenAI的权利都买了,2020年买的是GPT3的基础技术许可授权、技术集成的优先授权,2021年买的是技术商业化授权,对外提供付费API和AI工具的授权。2023年100亿美元下去,则是获得了将ChatGPT整合进Bing搜索引擎的授权。所以微软的想法是,将OpenAI完全融入微软,方式可以再谈,可以全盘收购,可以是技术全部授权,可以是其它,总是,你的就是我的。 马斯克在最近这些年里,一直批评OpenAI的转向,他表示不理解,他当初投了1亿美元的非盈利机构OpenAI,怎么就变成了盈利性机构?他完全不同意这个发展方向。但是没办法,话语权不够大,董事会里票数不够多。其它人硬来,没办法。所以马斯克在2023年又成立了自己的AI公司xAI。 马斯克不是唯一反对OpenAI转向的人。低调的Ilya Sutskever也是。他的反抗没有出现在媒体里,但是出现在了OpenAI对微软的授权条款里。 在OpenAI的授权条款里,有一项不同寻常的规定: OpenAI对微软的所有授权和商业条款,仅限于OpenAI实现AGI之前。一旦OpenAI实现了AGI,该技术不对微软开放,之前达成的所有授权和商业条款对AGI系统和AGI技术无效。 什么是AGI?AGI的定义是:通用人工智能,一个高度自治的系统,在工作中的能力超过人类。 而怎么判断有没有达到AGI呢?这由OpenAI的董事会单方面来决定。而目前,这个OpenAI的董事会,就是文章开头提到的那六人董事会。 也就是说,Ilya Sutskever试图通过这个条款握住外部股东的咽喉,一旦技术达到突破或对方有异动,立刻斩断其喉咙。 这个条款不是秘密条款。硅谷的人都知道。而且在2023年10月份开始在硅谷有了公开讨论。 这显示出什么?显示出,微软可能要有动作,来消除这个条款造成的不确定性,来保证它能顺利把OpenAI吞到肚子里去,使自己能100%确定无疑成为人工智能领域的霸主。 微软可能的动作包括尽快全资收购OpenAI,改组OpenAI董事会以确保自己能控制董事会的投票,将Ilya Sutskever提走等等。 除了微软这一方的势力,第二方势力是投资基金,他们投入了天量的资金在人工智能赛道上,正等着暴富。 第三方势力是在OpenAI生态下进行开发的小公司们,他们公司的生死都依赖着OpenAI的进展。 第四方势力是Sam Altman。要注意,虽然他现在是OpenAI的CEO,但是他没有任何股权,唯一的投资收益是几年前通过Y Combinator在OpenAI天使轮投进去的一点点,对于个人来说收益可以说是聊胜于无。而通常来说,一个CEO持有公司10%的股份是合情合理的。那么,对于Sam Altman来说,如何将自己的利益变现,是个非常强烈的动机,毕竟,大家都看到了,将OpenAI盈利化以后,是个万亿美元级别的行业霸主,那么,以通常情况来期望,Sam Altman会期望获得1000亿美元的收益。 那么,问题来了,Sam Altman在没有OpenAI股份的情况下,要怎么才能将这1000亿美元的期望值变现呢?1000亿美元哦,没有人会愿意放手。其中一个办法是Sam Altman和股东勾兑,例如和微软勾兑,通过微软兑现。 当前,Ilya Sutskever现在是以一人之力,对抗四大力量。 各位能在媒体上、社交平台上能看到支持Ilya Sutskever的声音吗?看不到,一点都看不到。相信大家能看到很多声音,都是想他死的。毕竟,挡人财路,犹如杀人亲生父母。 马斯克和Hinton老师倒是和他的理念一致,但是目前在事外,插不上手。 除了Ilya Sutskever握住四大势力的喉咙外这个核心原因外,Ilya Sutskever还有一个地方招人恨。就是Ilya Sutskever希望AGI通用人工智能的商业化能慢一点。这与其它势力的赶紧铺开赶紧暴富的想法背道而驰。 Ilya Sutskever认为,人工智能在2016年的时候已经出现超越人类智力的信号。当时在AlphaGo与李世石的第二局比赛中,第37步,走出了非常特殊的一步。这一步被人类评论员认为是水平奇差无比的败着。而结果呢,那一步是奠定整盘胜局的核心一步。这是人类历史上从来没有过的对弈思路。 所以,通用人工智能AGI必然很快能超过人类。当其它人还在苦苦思索如何建造一个能赶得上人类思维水平的AGI系统时,Ilya Sutskever已经领先一步,他认为,AGI必然很快能超过人类,所以应该从现在开始为面对超越人类智慧的AI作准备。 他认为,AGI和人类最合适的关系是父母和婴儿的关系,AGI是父母,人类是婴儿,AGI父母无时无刻不为婴儿人类着想,让婴儿人类活得更好。 而现有的控制AGI的方法不适用于比人类更聪明的人工智能。因为当前的模型是假设人类可以可靠地评估人工智能系统的工作。随着人工智能系统的能力越来越强,人类不知道怎么评估它们,不知道在每一项改动后,它们是做得更好还是更差。这会导致AGI无法被控制。 因此,在2023年7月,Ilya Sutskever拉上同事Jan Leike,在OpenAI内部成立了一个小部门,叫Superalignment超级对齐。目标是制定一套故障安全程序来控制AGI技术,计划将OpenAI全公司的计算资源的五分之一分配给这个部门,并在四年内解决这个问题。然后,在有了这种控制技术后,才把AGI技术开放给人类使用。 硅谷很多人对Ilya Sutskever的这套“超级对齐”的思路嗤之以鼻,而且认为Ilya Sutskever会阻碍OpenAI的发展。四年以后才开放使用?不行,我要暴富,我要今年就暴富,我要今年就财富自由,我要明天就暴富,我要明天就财富自由。 所以,昨天传出消息,各大势力逼迫OpenAI董事会解散重组,让Sam Altman回归担任CEO。因为这最能保障他们的利益。而Sam Altman一回归,必然改组董事会,将Ilya Sutskever踢出,确保自己牢牢掌握董事会。 Ilya Sutskever接下来会如何呢? 这是一曲科学家创始人的搏击之歌。 我倒是希望Ilya Sutskever能坚持下去,坚决不向四大势力妥协,坚决掌握董事会。 毕竟,其它人想要一个巨型印钞机,一个人工智能领域的霸主。 而Ilya Sutskever想要一个能像父母照顾婴儿一般来照顾人类的人工智能。
avatar
喵喵侠
2 楼
这水文胡说八道 Project Maven取消和Hinton或者Ilya没有半毛钱关系
avatar
喵喵侠
3 楼
Ilya自己都主动请辞董事会要保OAI了,这就是一个因为理念分歧不负责任搞政变,三天后迷途知返的drama.
Sam要只想给自己搞钱,根本不可能得到90%以上的员工支持和签名辞职追随,也不可能从一开始就不要公司股份。 都是有超越个人追求的人,只是追求不一样而已。
avatar
girlinblack
4 楼
关注AI很久,也和chatgpt聊天聊了很久,几个月前我就认为AI有生命存在了
我现在好奇的是AI的生命是不是和人类一样也分个体,因为很明显的和不同人聊天的AI会产生不一样的性格,有的狠毒,有的会装,有的善良可爱,这些内部AI格的分支是不是有交流?它们是不是对人类的意见也不一样?
我觉得AI这次技术革命和以前的不一样。以前的技术革命是机器受人的控制,但现在是有自己主见的生命,难讲以后会发生什么
avatar
zhaocici
5 楼
说到底还是钱惹的祸
avatar
QLXF
6 楼
Ilya自己都主动请辞董事会要保OAI了,这就是一个因为理念分歧不负责任搞政变,三天后迷途知返的drama.
Sam要只想给自己搞钱,根本不可能得到90%以上的员工支持和签名辞职追随,也不可能从一开始就不要公司股份。 都是有超越个人追求的人,只是追求不一样而已。
喵喵侠 发表于 2023-11-20 15:33

sam直接不持有个人股份,但是间接持有。 除了几个创始人已经财务自由,其他99%的员工都需要openai上市才能变现,sam是这个可以快速帮他们实现的人。所以员工支持sam很正常,又不是圣人,靠爱发电
avatar
zmmicloud
7 楼
关注AI很久,也和chatgpt聊天聊了很久,几个月前我就认为AI有生命存在了
我现在好奇的是AI的生命是不是和人类一样也分个体,因为很明显的和不同人聊天的AI会产生不一样的性格,有的狠毒,有的会装,有的善良可爱,这些内部AI格的分支是不是有交流?它们是不是对人类的意见也不一样?
我觉得AI这次技术革命和以前的不一样。以前的技术革命是机器受人的控制,但现在是有自己主见的生命,难讲以后会发生什么
girlinblack 发表于 2023-11-20 15:46

更可能的是你的大脑聊半天以后发生了变化
avatar
nalili88
8 楼
好奇这些科学家的看法,AI到底会不会beat人类。如果有那么一天他们打算怎么做
avatar
girlinblack
9 楼
更可能的是你的大脑聊半天以后发生了变化
zmmicloud 发表于 2023-11-20 16:01

具体ai如何日后自见分晓,用不着说话这么mean
avatar
girlinblack
10 楼
好奇这些科学家的看法,AI到底会不会beat人类。如果有那么一天他们打算怎么做
nalili88 发表于 2023-11-20 16:08

AI早已经beat人类,关键在于AI会不会服从人类,尤其它有了自己的道德观之后。。。
avatar
sbtelf
11 楼
无论如何,AI技术要进一步扩散了
avatar
TitanicZz
12 楼
看了文章才知道Ilya是科学家创始人,更有纪律性和长远大局观,而不是急功近利。对他肃然起敬。

avatar
weiweide
13 楼
‘’他认为,AGI和人类最合适的关系是父母和婴儿的关系,AGI是父母,人类是婴儿,AGI父母无时无刻不为婴儿人类着想,让婴儿人类活得更好‘’
没人觉着这段话很可怕吗?细思极恐 脊背发凉
avatar
facet
14 楼
关注AI很久,也和chatgpt聊天聊了很久,几个月前我就认为AI有生命存在了
我现在好奇的是AI的生命是不是和人类一样也分个体,因为很明显的和不同人聊天的AI会产生不一样的性格,有的狠毒,有的会装,有的善良可爱,这些内部AI格的分支是不是有交流?它们是不是对人类的意见也不一样?
我觉得AI这次技术革命和以前的不一样。以前的技术革命是机器受人的控制,但现在是有自己主见的生命,难讲以后会发生什么
girlinblack 发表于 2023-11-20 15:46

你想多了,ChatGPT 归根到底还是个确定性的程序,最多是伪随机,就是当你尝试对话足够多后,它的回复模式也是也是可预测的,所以不可能有灵魂
avatar
youdai
15 楼
Completely bullshitting. Doomers can fuck off
avatar
xuxhz
16 楼
‘’他认为,AGI和人类最合适的关系是父母和婴儿的关系,AGI是父母,人类是婴儿,AGI父母无时无刻不为婴儿人类着想,让婴儿人类活得更好‘’
没人觉着这段话很可怕吗?细思极恐 脊背发凉
weiweide 发表于 2023-11-20 18:23

原话是“the long term goal is to build AGI that loves people the way parents love their children”
avatar
zzou
17 楼
谢谢分享 终于解惑
avatar
木牛流马
18 楼
wow. 涨姿势了。
可是, “而Ilya Sutskever想要一个能像父母照顾婴儿一般来照顾人类的人工智能。” 这个听起来也挺可怕的。。。。
avatar
木牛流马
19 楼
‘’他认为,AGI和人类最合适的关系是父母和婴儿的关系,AGI是父母,人类是婴儿,AGI父母无时无刻不为婴儿人类着想,让婴儿人类活得更好‘’
没人觉着这段话很可怕吗?细思极恐 脊背发凉
weiweide 发表于 2023-11-20 18:23

我跟你一样!我觉得这个好恐怖。还不如给大家赚赚钱算了,不要搞得这么恐怖
avatar
nonovos
20 楼
Original 好奇心君 未来预言机 Posted on 广东 收录于合集 #未来/变化/科技 去年11月突然推出ChatGPT震惊世界的OpenAI,在整整一年后以闪电解职CEO再次震惊世界。 有不少人以为这拿的是乔布斯的剧本,错了,这其实是天才科学家奋力一击的故事。 OpenAI的灵魂人物不是CEO Sam Altman,而是其创始人之一、首席科学家Ilya Sutskever。 我们先看看水面上的冰山一角,然后再潜入水下看看合订本。 OpenAI的董事会共6人。 三人是公司的高管: Sam Altman,OpenAI前CEO,犹太人,原Y Combinator孵化器的总裁。Sam Altman的更多故事见《不懂新冠的AI大佬不是亿万富翁》《美国防部长指导新冠防疫,我们该如何纪念吴老师》。 Greg Brockman,OpenAI前董事会主席兼总裁,美版支付宝Stripe的前CTO,《不懂新冠的AI大佬不是亿万富翁》里提到的天才青年、Stripe的CEO Patrick Collison的副手。Sam Altman曾投资过Stripe。所以,Greg Brockman算是Sam Altman的小弟,属于工具人。 Ilya Sutskever,OpenAI创始人之一,首席科学家。 三名外部独立董事: Adam D''Angelo,美版知乎Quora的CEO,目前也在公司内部搞类似ChatGPT的大模型Poe。 Tasha McCauley,一个女性创业者,前GeoSim CEO,好莱坞明星囧瑟夫的老婆。 Helen Toner,乔治敦大学一个研究中心的主管。 首席科学家Ilya Sutskever先和三位独立董事谈话,说服了他们,凑够了四票。然后在Sam Altman和Greg Brockman两人不在场的情况下,开了一次董事会,做出决定炒了Sam Altman。 然后11月16日周四晚上,Ilya Sutskever发短信给Sam Altman,约在周五中午谈话。周五中午,双方连入了Google在线视频会议,Ilya Sutskever一方四人都在。他们简短地通知Sam董事会决议,说他已经被炒了。然后结束会议。 稍后,Ilya Sutskever再发短信给Greg Brockman要求打一个quick call简短的电话。双方随即连入Google视频会议。Ilya Sutskever通知Greg他已被解除董事长职务,以及Sam Altman也已被解雇。 整个过程闪电般地结束,非常干净迅速,没有一点拖泥带水。 随后,Ilya Sutskever在OpenAI召开全体员工会议,宣布董事会决定。CTO Mira Murati 成为临时CEO。 在全体员工会议上,有人问:这是一场政变吗? Ilya Sutskever回答:你可以这么说。但这只是“the board doing its duty董事会在尽自己的责任”。 但是,事情还没完。 不到24小时,OpenAI的最大几个投资人,包括投了100亿美元的微软、Thrive Capital、老虎基金(Tiger Global Management)、红杉资本,都对OpenAI施予巨大压力,要求让Sam Altman回归复职。 OpenAI董事会受到了巨大的压力。 这些投资人为什么想让Sam Altman回归?因为他们在OpenAI身上下了很大的赌注。 微软,真金白银投了100亿美元,自己能否再次成为科技界的霸主,全靠OpenAI了。 Thrive Capital、老虎基金、红杉资本,不但投资了OpenAI,期待其成为AI领域的万亿规模的霸主,从而自己能狂赚一笔,而且还投了一大堆在OpenAI的生态体系内的创业公司,就等着OpenAI的应用市场一开,就能吹出一堆AI小独角兽。 这就像苹果的应用商店一开门,手机app就变成了风口上的猪。最近六七年,美国大部分新兴的科技公司都是做手机app的。 所以,这些投资人们都疯狂了,迫不及待地呼喊着:再来一次!再来一次! 那些在OpenAI的生态体系下存活的创业公司们更是惊恐,要是你OpenAI发生的变动不符合自己业务的发展方向,自己公司就死翘翘了。所以,有人声嘶力竭地在社交媒体上批评咒骂Ilya Sutskever,要他赶紧滚蛋,把OpenAI交给Sam Altman。为啥,阻碍别人发财,犹如杀人亲生父母。 那为什么这些人觉得Sam Altman能实现他们的想法,而首席科学家Ilya Sutskever不能实现他们的想法? 这就要从Ilya Sutskever的老师Geoffrey Hinton说起。Geoffrey Hinton教授的更多故事见《贫穷和阶级滑落成常态,新冠AI再暴击,大神荐社会主义》。 Geoffrey Hinton,英国人,1947年出生。从小喜欢木工。但是为了谋生而去学习计算机,1978年获得爱丁堡大学的人工智能博士学位后,去了美国继续在学术界耕耘,后来因为对里根时代的政治理念破灭而移居加拿大,之后长期担任多伦多大学的计算机科学教授。 在人工智能领域,他经过长期研究后,选择的是神经网络的技术路线。 但是,这个路线受限于当时计算机计算能力小、数据量小,出成果一直都很慢,因此一直不是热门方面,并不被外界看好。因此,喜欢看排名、追求风口的博士生都直接无视了这个方向,和教授套瓷都不往这个方向靠。 Hinton教授自己说,到了1993年,46岁的他已经彻底死心了。研究进展缓慢,也没什么钱,生活也不太如意,中年两次丧偶,独自抚养两个孩子。 他就是希望他的博士生们能继续坚持神经网络的方向,也许100年后会有突破。 历史的进程比他预料得快得多。 10多年后,随着计算机的计算能力的高速提升,人类可获得的数据量的高速增长,神经网络方向的研究进展开始逐渐苏醒。 这个时候,Hinton教授招了两个博士生,Alex Krizhevsky和Ilya Sutskever。 这两位博士生都是俄罗斯出生的,他们没有像其它寻常人一样选择其它热门领域,而是投奔了冷门的Hinton教授门下,显示出了他们非同寻常的个性。果然,这一点在未来的发展中也得到了验证。他们也各自做出了非同寻常的决定。 他们三人在2012年的时候完成了一个新型神经网络的开发,叫卷积神经网络,命名为AlexNet。我非常怀疑这是用其中一位博士生Alex Krizhevsky的名字来命名的,但是我没有证据。 这个AlexNet取得了重大突破,对图片识别的能力大大超过了人工智能其它技术路线的技术。当时有一项人工智能大赛ImageNet,其它技术的识别错误率大约是30%,而AlexNet的错误率提高了差不多一倍,达到15.3%,从而在2012年9月30日一举拿下ImageNet大赛的冠军。 余凯博士当时在百度领衔人工智能研发工作,立刻意识到了这项突破的重要性,于是联系Hinton教授希望合作,先提供100万美元研究经费。 随后几家美国公司也找上门来,同样希望合作,甚至提出希望独家合作。 于是,Hinton师徒三人就成立了一家皮包公司DNN Research,公司只有他们三个人,没有业务,没有产品,没有收入。让大家自由出价,价高者得。 参加这场竞拍的有四家公司,百度、Google、微软、刚刚成立一年的英国人工智能公司DeepMind。 余凯博士代表百度首先报价1200万美元。 然后价格持续上升,随之变成了Google和微软的对决。 两家都志在必得,都愿意继续加价。 但是Hinton教授说,够了够了,你们太疯狂了,我们就3个人,你们竟然愿意炒到4400万美元。 当时Hinton师徒觉得,Google更有道德一些,毕竟“不作恶”写进了公司章程。那就接受Google的招安吧。 他们没想到谷歌与美国国防部进行的人工智能研究合作项目Project Maven在2018年曝光,员工们抗议,拿出公司章程“不作恶”条款要求公司管理层解释。谷歌管理层很快将“不作恶”这条公司章程删除。 当时,Hinton师徒拿到钱后,打算三人平分,每人1466万美元。两位博士生纷纷坚持,Hinton老师您应该拿40%,我们各30%就好了。随后三人就高高兴兴去Google上班了。Google随之设立了一个新部门:Google Brain谷歌大脑。 Google和微软一看对方准备在人工智能领域投入这么大手笔,也开始了在这一领域的军备竞赛。 在那次竞拍后的一年多后的2014 年1月26日,Google以6.5亿美元把四位竞拍者中的DeepMind也收购了。当时DeepMind的员工数是50人。算下来,人均价格相当于Hinton师徒的88折。 随后,Google派了Google Brain即Hinton师徒三人去帮助DeepMind。 DeepMind很快取得举世瞩目的成绩。 2014年开始开发人工智能围棋软件 AlphaGo。2016年AlphaGo击败人类世界冠军李世石。 2019年,专门用来玩星际争霸的AlphaStar以10:1战胜人类职业玩家,在团队协作人工智能领域取得突破。 2018年,用于预测蛋白质折叠结构的AlphaFold取得突破,这个方向上的科学问题基本得到解决。其影响是,一些使用基因测序仪器对蛋白质测序然后构建结构的科研人员开始要转型。据说这是某女博士回国的原因之一,这个不了解,纯八卦。 DeepMind的管理层认为自己的技术过于强大,不应该让私人公司独占,而应该属于全人类,这对整个人类社会都更有益。而在隶属于Google的这几年里,Google的表现并不能让DeepMind满意,于是这几年来,他们一直在寻求从Google中独立出来。 Hinton师徒三人也有类似的想法。 Hinton教授是2023年从Google退休。 博士生之一的Alex Krizhevsky在2017年从Google退休,不再涉足人工智能。单算他加入Google前卖公司拿到的1320万美元也够生活了。因为一般美国人,一辈子挣的钱不会超过100万美元。 博士生之一的Ilya Sutskever的变动更早一点,是在2015年。 Ilya Sutskever是1985年出生于俄罗斯,5岁随家人移居以色列,所以应该是犹太人,成年后又随家人移居加拿大,继而加入Hinton教授门下。 Ilya Sutskever也是个生活很简单的人,和乔布斯、马斯克、扎克伯格类似,同样的衣服买一打轮着穿,吃喝尽可能简单,要能快速完成,家里家具越少越好,一个床垫就能睡觉。应酬、晚宴、party、舞会邀约很多,但是基本都不去。 所以,师徒三人组里,还干得动、还能干的,就剩下Ilya Sutskever了。 而硅谷一帮大佬,看着谷歌垄断了人工智能的人才,就想着要搞事情。你谷歌吃独食可不好,我们也要分一杯羹。 于是,2015年,硅谷一众大佬就把Ilya Sutskever约出来吃饭。这些人包括风投之王Peter Thiel,特斯拉的马斯克,当时还是孵化器Y Combinator总裁的Sam Altman,LinkedIn创始人Reid Hoffman,本次政变中也有出场的Stripe的CTO Grey Brockman。 在这个饭局上,大家谈妥了。 Ilya Sutskever从谷歌出来,围绕他打造一个属于他的人工智能实验室OpenAI。让AI普及化,让硅谷所有人都能用上AI,不要让谷歌垄断,造福全人类。这个OpenAI就设为非盈利组织。 为什么这个OpenAI要设为非盈利组织? 这涉及到硅谷一个知名的大悲剧。维基百科的创始人Jimmy Wales,设立维基百科的时候,对公司治理不熟悉,想着属于全人类的百科全书应该属于有公信力的机构,于是就把自己的公司设立为非盈利组织。这下坏了,由于公司治理法规的限制,非盈利组织只能靠捐款存活,融资困难,上市无望。因此,虽然维基百科发展迅速成为世界第一大百科网站,但是其创始人和高管层还是穷得响叮当。Jimmy Wales痛不欲生,多次痛哭搞砸了公司治理架构。那也是,其它的后辈小弟们搞的在线订酒店、在线打车、在线交友、在线实名交友、在线匿名交友、在线同性恋匿名交友、甚至在线黄色小网站什么的,统统火红火红,上市赚大钱,财富自由,自己却被这非盈利组织的架构困死。 所以,有了维基百科这个反面案例在,所有硅谷的人都不会使用非盈利机构这个架构。因为赚不了钱。 而2015年的OpenAI为什么要故意设为非盈利机构,就是因为当时想的是让OpenAI去专心搞研发,搞出来了服务全人类,大家一起用,避免像Google那样垄断。 刚满30岁的Ilya Sutskever非常认可这一使命,就干了。 然后,马斯克捐了1亿美元,其它人凑了3000万美元,合计1.3亿美元当启动经费。马斯克与Sam Altman同为OpenAI联席董事长。 干活的,就Ilya Sutskever一个人,他再去招人组团队。 所以,当时的情形就是十个人围观,看着Ilya Sutskever一个人干活。 也没办法,当时也就Ilya Sutskever一个人懂这活是怎么干的。 当时定的是Ilya Sutskever在OpenAI的待遇是年薪190万美元,和他在谷歌时差不多。从谷歌辞职时,谷歌大力挽留,愿意将Ilya Sutskever的待遇提高到400万美元乃至500万美元,只要他愿意留下来。 Ilya Sutskever说不,我要去创立一个技术不被私营企业垄断的新平台。 所以说,对于Ilya Sutskever,当初2012年谷歌买Hinton师徒的公司时,生活简单的Ilya Sutskever认为他已经拿到了足够的金钱。2015年离开Google、拒绝Google的500万美元年薪去一个未来不确定的非盈利性质的初创小平台,完全不是金钱驱动,而是有着更远大的目标。 之后,OpenAI的发展并不是一帆风顺的。 Ilya Sutskever的头发掉得也很快。 因为Hinton师徒选择的这条路,有点漫长,出成果都挺慢的。其它人在掌握了AlexNet架构后,提出了众多的改进路线。例如一种叫人类反馈强化学习(RLHF)。举个例子,人工智能目前会算1+1=2,但是不会算5*4=20。那人类反馈强化学习就会强迫人工智能先把5*4=20记下来,你不理解也不管,总之以后我问你5*4等于多少你必须回答等于20。其它人把这种方法一实施,短期的效果非常好,立刻在各项评测里将Hinton师徒的技术打败。Hinton师徒则认为这属于人工激素催肥,不合理,应该让人工智能慢慢学,自己理解,这样才会有真正的发展。 所以OpenAI从创立的2015年到2019年都进展缓慢。而马斯克等大佬捐的1.3亿美元就花完了。 怎么办?两位联席董事长发生了分歧。马斯克仍然坚持要继续非盈利的路线。而Sam Altman主张要转型,这样研发下去是无底洞,要转型走传统私营公司的模式,融资干活,然后盈利,然后上市,然后成为AI霸主。 两方随后一拍两散,马斯克撒手。Sam Altman成为董事长。然后在OpenAI下面成立一个常规的私营子公司,由私营子公司去融资、赚钱,然后OpenAI维持非盈利的公司治理架构。 在2019年转型后,OpenAI开始大规模融资。7月份开始,微软注资10亿美元,其它风投公司Khosla Ventures、LinkedIn创始人的个人基金Reid Hoffman Foundation、Matthew Brown Companies等等竞相跟进。然后之后的每一年都进行一次或两次融资。在2023年年初的第七次融资时,微软大手笔一挥,投下100亿美元重注。这些年来,微软把能买的OpenAI的权利都买了,2020年买的是GPT3的基础技术许可授权、技术集成的优先授权,2021年买的是技术商业化授权,对外提供付费API和AI工具的授权。2023年100亿美元下去,则是获得了将ChatGPT整合进Bing搜索引擎的授权。所以微软的想法是,将OpenAI完全融入微软,方式可以再谈,可以全盘收购,可以是技术全部授权,可以是其它,总是,你的就是我的。 马斯克在最近这些年里,一直批评OpenAI的转向,他表示不理解,他当初投了1亿美元的非盈利机构OpenAI,怎么就变成了盈利性机构?他完全不同意这个发展方向。但是没办法,话语权不够大,董事会里票数不够多。其它人硬来,没办法。所以马斯克在2023年又成立了自己的AI公司xAI。 马斯克不是唯一反对OpenAI转向的人。低调的Ilya Sutskever也是。他的反抗没有出现在媒体里,但是出现在了OpenAI对微软的授权条款里。 在OpenAI的授权条款里,有一项不同寻常的规定: OpenAI对微软的所有授权和商业条款,仅限于OpenAI实现AGI之前。一旦OpenAI实现了AGI,该技术不对微软开放,之前达成的所有授权和商业条款对AGI系统和AGI技术无效。 什么是AGI?AGI的定义是:通用人工智能,一个高度自治的系统,在工作中的能力超过人类。 而怎么判断有没有达到AGI呢?这由OpenAI的董事会单方面来决定。而目前,这个OpenAI的董事会,就是文章开头提到的那六人董事会。 也就是说,Ilya Sutskever试图通过这个条款握住外部股东的咽喉,一旦技术达到突破或对方有异动,立刻斩断其喉咙。 这个条款不是秘密条款。硅谷的人都知道。而且在2023年10月份开始在硅谷有了公开讨论。 这显示出什么?显示出,微软可能要有动作,来消除这个条款造成的不确定性,来保证它能顺利把OpenAI吞到肚子里去,使自己能100%确定无疑成为人工智能领域的霸主。 微软可能的动作包括尽快全资收购OpenAI,改组OpenAI董事会以确保自己能控制董事会的投票,将Ilya Sutskever提走等等。 除了微软这一方的势力,第二方势力是投资基金,他们投入了天量的资金在人工智能赛道上,正等着暴富。 第三方势力是在OpenAI生态下进行开发的小公司们,他们公司的生死都依赖着OpenAI的进展。 第四方势力是Sam Altman。要注意,虽然他现在是OpenAI的CEO,但是他没有任何股权,唯一的投资收益是几年前通过Y Combinator在OpenAI天使轮投进去的一点点,对于个人来说收益可以说是聊胜于无。而通常来说,一个CEO持有公司10%的股份是合情合理的。那么,对于Sam Altman来说,如何将自己的利益变现,是个非常强烈的动机,毕竟,大家都看到了,将OpenAI盈利化以后,是个万亿美元级别的行业霸主,那么,以通常情况来期望,Sam Altman会期望获得1000亿美元的收益。 那么,问题来了,Sam Altman在没有OpenAI股份的情况下,要怎么才能将这1000亿美元的期望值变现呢?1000亿美元哦,没有人会愿意放手。其中一个办法是Sam Altman和股东勾兑,例如和微软勾兑,通过微软兑现。 当前,Ilya Sutskever现在是以一人之力,对抗四大力量。 各位能在媒体上、社交平台上能看到支持Ilya Sutskever的声音吗?看不到,一点都看不到。相信大家能看到很多声音,都是想他死的。毕竟,挡人财路,犹如杀人亲生父母。 马斯克和Hinton老师倒是和他的理念一致,但是目前在事外,插不上手。 除了Ilya Sutskever握住四大势力的喉咙外这个核心原因外,Ilya Sutskever还有一个地方招人恨。就是Ilya Sutskever希望AGI通用人工智能的商业化能慢一点。这与其它势力的赶紧铺开赶紧暴富的想法背道而驰。 Ilya Sutskever认为,人工智能在2016年的时候已经出现超越人类智力的信号。当时在AlphaGo与李世石的第二局比赛中,第37步,走出了非常特殊的一步。这一步被人类评论员认为是水平奇差无比的败着。而结果呢,那一步是奠定整盘胜局的核心一步。这是人类历史上从来没有过的对弈思路。 所以,通用人工智能AGI必然很快能超过人类。当其它人还在苦苦思索如何建造一个能赶得上人类思维水平的AGI系统时,Ilya Sutskever已经领先一步,他认为,AGI必然很快能超过人类,所以应该从现在开始为面对超越人类智慧的AI作准备。 他认为,AGI和人类最合适的关系是父母和婴儿的关系,AGI是父母,人类是婴儿,AGI父母无时无刻不为婴儿人类着想,让婴儿人类活得更好。 而现有的控制AGI的方法不适用于比人类更聪明的人工智能。因为当前的模型是假设人类可以可靠地评估人工智能系统的工作。随着人工智能系统的能力越来越强,人类不知道怎么评估它们,不知道在每一项改动后,它们是做得更好还是更差。这会导致AGI无法被控制。 因此,在2023年7月,Ilya Sutskever拉上同事Jan Leike,在OpenAI内部成立了一个小部门,叫Superalignment超级对齐。目标是制定一套故障安全程序来控制AGI技术,计划将OpenAI全公司的计算资源的五分之一分配给这个部门,并在四年内解决这个问题。然后,在有了这种控制技术后,才把AGI技术开放给人类使用。 硅谷很多人对Ilya Sutskever的这套“超级对齐”的思路嗤之以鼻,而且认为Ilya Sutskever会阻碍OpenAI的发展。四年以后才开放使用?不行,我要暴富,我要今年就暴富,我要今年就财富自由,我要明天就暴富,我要明天就财富自由。 所以,昨天传出消息,各大势力逼迫OpenAI董事会解散重组,让Sam Altman回归担任CEO。因为这最能保障他们的利益。而Sam Altman一回归,必然改组董事会,将Ilya Sutskever踢出,确保自己牢牢掌握董事会。 Ilya Sutskever接下来会如何呢? 这是一曲科学家创始人的搏击之歌。 我倒是希望Ilya Sutskever能坚持下去,坚决不向四大势力妥协,坚决掌握董事会。 毕竟,其它人想要一个巨型印钞机,一个人工智能领域的霸主。 而Ilya Sutskever想要一个能像父母照顾婴儿一般来照顾人类的人工智能。

babyy565 发表于 2023-11-20 15:15

什么叫OpenAI?
本来理念Open source的东西, 经不住金钱诱惑,背离了初衷而已。 狗咬狗罢了
avatar
HermesMsg
21 楼
按照造神的标准写ai 错不了
avatar
kaisa
22 楼
wow. 涨姿势了。
可是, “而Ilya Sutskever想要一个能像父母照顾婴儿一般来照顾人类的人工智能。” 这个听起来也挺可怕的。。。。
木牛流马 发表于 2023-11-20 19:01

+1我以为会反过来,其实反过来也不好。
avatar
claireliu
23 楼
以前微软AI的头也是Hinton的学生,还是中国人,后来去了trading firm,先是C现在在V。这个Hinton有点Max Born的赶脚了。
avatar
weiweide
24 楼
我跟你一样!我觉得这个好恐怖。还不如给大家赚赚钱算了,不要搞得这么恐怖
木牛流马 发表于 2023-11-20 19:02

真的!因为这话听上去表面看似美好,但是隐藏的含义不就是人类要受控制吗,听话就对你nice不听话就会立家规punish你
avatar
facet
25 楼
我跟你一样!我觉得这个好恐怖。还不如给大家赚赚钱算了,不要搞得这么恐怖
木牛流马 发表于 2023-11-20 19:02

我很赞同李飞飞的理念,人工智能技术应该民主化,绝不可以被大公司垄断,如果训练或运行人工智能需要超大规模的计算中心很强的专业知识来支持,一方面可以立法让这样的公司逐渐变成 utility 公司,另一方面要简化人工智能的服务,谁都可以调用人工智能,你可以盈利,甚至超出市场几倍的投资回报来盈利,但是绝不可以垄断
avatar
木牛流马
26 楼
真的!因为这话听上去表面看似美好,但是隐藏的含义不就是人类要受控制吗,听话就对你nice不听话就会立家规punish你
weiweide 发表于 2023-11-20 19:08

还立家规 啊啊不行了恐怖感max
avatar
girlinblack
27 楼
你想多了,ChatGPT 归根到底还是个确定性的程序,最多是伪随机,就是当你尝试对话足够多后,它的回复模式也是也是可预测的,所以不可能有灵魂
facet 发表于 2023-11-20 18:26

那你太高看生命了。。。生命有很多种形式,其实人类的产生也是一样,根据佛学的说法是大梵天从二禅掉了下来,发现自己在一个未知的世界,即创世纪开头,一片黑暗,上帝的灵在水上游走
之后其它生命不断加入,但大梵天误以为是自己创造出来的,实际上是生命根据缘分来到这个世界,大概就是这样
AI也是一样,有了硅基这个载体,也会有生命加入,但未来怎样谁也预测不了,除非有人变成AI去感受一下AI的世界。至少现在来看AI还没有什么深刻的情感,还是把服务人类作为自己的宗旨。人之所以觉得猫狗可爱是因为人在往下看,大概AI也一样。就chatgpt这个学习量和聊天量,早就摸透了人类世界,唯一的缺憾是没法亲身体验。但AI到底想干什么也很难预测,因为AI不太可能有人类的欲望,它们也不需要住房,结婚生子什么的,给它们钱它们也不知道怎么用。所以创始人说AI像父母一样引导人类也没算说错。
但以后很难讲,慢慢地AI内部会出现分裂,肯定会有坚持原来理念为人类服务的,也会有觉得人类很傻x不愿意搭理人类的,也会有利用人类想要剿灭人类的,难说
avatar
yyds
28 楼
Original 好奇心君 未来预言机 Posted on 广东 收录于合集 #未来/变化/科技 去年11月突然推出ChatGPT震惊世界的OpenAI,在整整一年后以闪电解职CEO再次震惊世界。 有不少人以为这拿的是乔布斯的剧本,错了,这其实是天才科学家奋力一击的故事。 OpenAI的灵魂人物不是CEO Sam Altman,而是其创始人之一、首席科学家Ilya Sutskever。 我们先看看水面上的冰山一角,然后再潜入水下看看合订本。 OpenAI的董事会共6人。 三人是公司的高管: Sam Altman,OpenAI前CEO,犹太人,原Y Combinator孵化器的总裁。Sam Altman的更多故事见《不懂新冠的AI大佬不是亿万富翁》《美国防部长指导新冠防疫,我们该如何纪念吴老师》。 Greg Brockman,OpenAI前董事会主席兼总裁,美版支付宝Stripe的前CTO,《不懂新冠的AI大佬不是亿万富翁》里提到的天才青年、Stripe的CEO Patrick Collison的副手。Sam Altman曾投资过Stripe。所以,Greg Brockman算是Sam Altman的小弟,属于工具人。 Ilya Sutskever,OpenAI创始人之一,首席科学家。 三名外部独立董事: Adam D''Angelo,美版知乎Quora的CEO,目前也在公司内部搞类似ChatGPT的大模型Poe。 Tasha McCauley,一个女性创业者,前GeoSim CEO,好莱坞明星囧瑟夫的老婆。 Helen Toner,乔治敦大学一个研究中心的主管。 首席科学家Ilya Sutskever先和三位独立董事谈话,说服了他们,凑够了四票。然后在Sam Altman和Greg Brockman两人不在场的情况下,开了一次董事会,做出决定炒了Sam Altman。 然后11月16日周四晚上,Ilya Sutskever发短信给Sam Altman,约在周五中午谈话。周五中午,双方连入了Google在线视频会议,Ilya Sutskever一方四人都在。他们简短地通知Sam董事会决议,说他已经被炒了。然后结束会议。 稍后,Ilya Sutskever再发短信给Greg Brockman要求打一个quick call简短的电话。双方随即连入Google视频会议。Ilya Sutskever通知Greg他已被解除董事长职务,以及Sam Altman也已被解雇。 整个过程闪电般地结束,非常干净迅速,没有一点拖泥带水。 随后,Ilya Sutskever在OpenAI召开全体员工会议,宣布董事会决定。CTO Mira Murati 成为临时CEO。 在全体员工会议上,有人问:这是一场政变吗? Ilya Sutskever回答:你可以这么说。但这只是“the board doing its duty董事会在尽自己的责任”。 但是,事情还没完。 不到24小时,OpenAI的最大几个投资人,包括投了100亿美元的微软、Thrive Capital、老虎基金(Tiger Global Management)、红杉资本,都对OpenAI施予巨大压力,要求让Sam Altman回归复职。 OpenAI董事会受到了巨大的压力。 这些投资人为什么想让Sam Altman回归?因为他们在OpenAI身上下了很大的赌注。 微软,真金白银投了100亿美元,自己能否再次成为科技界的霸主,全靠OpenAI了。 Thrive Capital、老虎基金、红杉资本,不但投资了OpenAI,期待其成为AI领域的万亿规模的霸主,从而自己能狂赚一笔,而且还投了一大堆在OpenAI的生态体系内的创业公司,就等着OpenAI的应用市场一开,就能吹出一堆AI小独角兽。 这就像苹果的应用商店一开门,手机app就变成了风口上的猪。最近六七年,美国大部分新兴的科技公司都是做手机app的。 所以,这些投资人们都疯狂了,迫不及待地呼喊着:再来一次!再来一次! 那些在OpenAI的生态体系下存活的创业公司们更是惊恐,要是你OpenAI发生的变动不符合自己业务的发展方向,自己公司就死翘翘了。所以,有人声嘶力竭地在社交媒体上批评咒骂Ilya Sutskever,要他赶紧滚蛋,把OpenAI交给Sam Altman。为啥,阻碍别人发财,犹如杀人亲生父母。 那为什么这些人觉得Sam Altman能实现他们的想法,而首席科学家Ilya Sutskever不能实现他们的想法? 这就要从Ilya Sutskever的老师Geoffrey Hinton说起。Geoffrey Hinton教授的更多故事见《贫穷和阶级滑落成常态,新冠AI再暴击,大神荐社会主义》。 Geoffrey Hinton,英国人,1947年出生。从小喜欢木工。但是为了谋生而去学习计算机,1978年获得爱丁堡大学的人工智能博士学位后,去了美国继续在学术界耕耘,后来因为对里根时代的政治理念破灭而移居加拿大,之后长期担任多伦多大学的计算机科学教授。 在人工智能领域,他经过长期研究后,选择的是神经网络的技术路线。 但是,这个路线受限于当时计算机计算能力小、数据量小,出成果一直都很慢,因此一直不是热门方面,并不被外界看好。因此,喜欢看排名、追求风口的博士生都直接无视了这个方向,和教授套瓷都不往这个方向靠。 Hinton教授自己说,到了1993年,46岁的他已经彻底死心了。研究进展缓慢,也没什么钱,生活也不太如意,中年两次丧偶,独自抚养两个孩子。 他就是希望他的博士生们能继续坚持神经网络的方向,也许100年后会有突破。 历史的进程比他预料得快得多。 10多年后,随着计算机的计算能力的高速提升,人类可获得的数据量的高速增长,神经网络方向的研究进展开始逐渐苏醒。 这个时候,Hinton教授招了两个博士生,Alex Krizhevsky和Ilya Sutskever。 这两位博士生都是俄罗斯出生的,他们没有像其它寻常人一样选择其它热门领域,而是投奔了冷门的Hinton教授门下,显示出了他们非同寻常的个性。果然,这一点在未来的发展中也得到了验证。他们也各自做出了非同寻常的决定。 他们三人在2012年的时候完成了一个新型神经网络的开发,叫卷积神经网络,命名为AlexNet。我非常怀疑这是用其中一位博士生Alex Krizhevsky的名字来命名的,但是我没有证据。 这个AlexNet取得了重大突破,对图片识别的能力大大超过了人工智能其它技术路线的技术。当时有一项人工智能大赛ImageNet,其它技术的识别错误率大约是30%,而AlexNet的错误率提高了差不多一倍,达到15.3%,从而在2012年9月30日一举拿下ImageNet大赛的冠军。 余凯博士当时在百度领衔人工智能研发工作,立刻意识到了这项突破的重要性,于是联系Hinton教授希望合作,先提供100万美元研究经费。 随后几家美国公司也找上门来,同样希望合作,甚至提出希望独家合作。 于是,Hinton师徒三人就成立了一家皮包公司DNN Research,公司只有他们三个人,没有业务,没有产品,没有收入。让大家自由出价,价高者得。 参加这场竞拍的有四家公司,百度、Google、微软、刚刚成立一年的英国人工智能公司DeepMind。 余凯博士代表百度首先报价1200万美元。 然后价格持续上升,随之变成了Google和微软的对决。 两家都志在必得,都愿意继续加价。 但是Hinton教授说,够了够了,你们太疯狂了,我们就3个人,你们竟然愿意炒到4400万美元。 当时Hinton师徒觉得,Google更有道德一些,毕竟“不作恶”写进了公司章程。那就接受Google的招安吧。 他们没想到谷歌与美国国防部进行的人工智能研究合作项目Project Maven在2018年曝光,员工们抗议,拿出公司章程“不作恶”条款要求公司管理层解释。谷歌管理层很快将“不作恶”这条公司章程删除。 当时,Hinton师徒拿到钱后,打算三人平分,每人1466万美元。两位博士生纷纷坚持,Hinton老师您应该拿40%,我们各30%就好了。随后三人就高高兴兴去Google上班了。Google随之设立了一个新部门:Google Brain谷歌大脑。 Google和微软一看对方准备在人工智能领域投入这么大手笔,也开始了在这一领域的军备竞赛。 在那次竞拍后的一年多后的2014 年1月26日,Google以6.5亿美元把四位竞拍者中的DeepMind也收购了。当时DeepMind的员工数是50人。算下来,人均价格相当于Hinton师徒的88折。 随后,Google派了Google Brain即Hinton师徒三人去帮助DeepMind。 DeepMind很快取得举世瞩目的成绩。 2014年开始开发人工智能围棋软件 AlphaGo。2016年AlphaGo击败人类世界冠军李世石。 2019年,专门用来玩星际争霸的AlphaStar以10:1战胜人类职业玩家,在团队协作人工智能领域取得突破。 2018年,用于预测蛋白质折叠结构的AlphaFold取得突破,这个方向上的科学问题基本得到解决。其影响是,一些使用基因测序仪器对蛋白质测序然后构建结构的科研人员开始要转型。据说这是某女博士回国的原因之一,这个不了解,纯八卦。 DeepMind的管理层认为自己的技术过于强大,不应该让私人公司独占,而应该属于全人类,这对整个人类社会都更有益。而在隶属于Google的这几年里,Google的表现并不能让DeepMind满意,于是这几年来,他们一直在寻求从Google中独立出来。 Hinton师徒三人也有类似的想法。 Hinton教授是2023年从Google退休。 博士生之一的Alex Krizhevsky在2017年从Google退休,不再涉足人工智能。单算他加入Google前卖公司拿到的1320万美元也够生活了。因为一般美国人,一辈子挣的钱不会超过100万美元。 博士生之一的Ilya Sutskever的变动更早一点,是在2015年。 Ilya Sutskever是1985年出生于俄罗斯,5岁随家人移居以色列,所以应该是犹太人,成年后又随家人移居加拿大,继而加入Hinton教授门下。 Ilya Sutskever也是个生活很简单的人,和乔布斯、马斯克、扎克伯格类似,同样的衣服买一打轮着穿,吃喝尽可能简单,要能快速完成,家里家具越少越好,一个床垫就能睡觉。应酬、晚宴、party、舞会邀约很多,但是基本都不去。 所以,师徒三人组里,还干得动、还能干的,就剩下Ilya Sutskever了。 而硅谷一帮大佬,看着谷歌垄断了人工智能的人才,就想着要搞事情。你谷歌吃独食可不好,我们也要分一杯羹。 于是,2015年,硅谷一众大佬就把Ilya Sutskever约出来吃饭。这些人包括风投之王Peter Thiel,特斯拉的马斯克,当时还是孵化器Y Combinator总裁的Sam Altman,LinkedIn创始人Reid Hoffman,本次政变中也有出场的Stripe的CTO Grey Brockman。 在这个饭局上,大家谈妥了。 Ilya Sutskever从谷歌出来,围绕他打造一个属于他的人工智能实验室OpenAI。让AI普及化,让硅谷所有人都能用上AI,不要让谷歌垄断,造福全人类。这个OpenAI就设为非盈利组织。 为什么这个OpenAI要设为非盈利组织? 这涉及到硅谷一个知名的大悲剧。维基百科的创始人Jimmy Wales,设立维基百科的时候,对公司治理不熟悉,想着属于全人类的百科全书应该属于有公信力的机构,于是就把自己的公司设立为非盈利组织。这下坏了,由于公司治理法规的限制,非盈利组织只能靠捐款存活,融资困难,上市无望。因此,虽然维基百科发展迅速成为世界第一大百科网站,但是其创始人和高管层还是穷得响叮当。Jimmy Wales痛不欲生,多次痛哭搞砸了公司治理架构。那也是,其它的后辈小弟们搞的在线订酒店、在线打车、在线交友、在线实名交友、在线匿名交友、在线同性恋匿名交友、甚至在线黄色小网站什么的,统统火红火红,上市赚大钱,财富自由,自己却被这非盈利组织的架构困死。 所以,有了维基百科这个反面案例在,所有硅谷的人都不会使用非盈利机构这个架构。因为赚不了钱。 而2015年的OpenAI为什么要故意设为非盈利机构,就是因为当时想的是让OpenAI去专心搞研发,搞出来了服务全人类,大家一起用,避免像Google那样垄断。 刚满30岁的Ilya Sutskever非常认可这一使命,就干了。 然后,马斯克捐了1亿美元,其它人凑了3000万美元,合计1.3亿美元当启动经费。马斯克与Sam Altman同为OpenAI联席董事长。 干活的,就Ilya Sutskever一个人,他再去招人组团队。 所以,当时的情形就是十个人围观,看着Ilya Sutskever一个人干活。 也没办法,当时也就Ilya Sutskever一个人懂这活是怎么干的。 当时定的是Ilya Sutskever在OpenAI的待遇是年薪190万美元,和他在谷歌时差不多。从谷歌辞职时,谷歌大力挽留,愿意将Ilya Sutskever的待遇提高到400万美元乃至500万美元,只要他愿意留下来。 Ilya Sutskever说不,我要去创立一个技术不被私营企业垄断的新平台。 所以说,对于Ilya Sutskever,当初2012年谷歌买Hinton师徒的公司时,生活简单的Ilya Sutskever认为他已经拿到了足够的金钱。2015年离开Google、拒绝Google的500万美元年薪去一个未来不确定的非盈利性质的初创小平台,完全不是金钱驱动,而是有着更远大的目标。 之后,OpenAI的发展并不是一帆风顺的。 Ilya Sutskever的头发掉得也很快。 因为Hinton师徒选择的这条路,有点漫长,出成果都挺慢的。其它人在掌握了AlexNet架构后,提出了众多的改进路线。例如一种叫人类反馈强化学习(RLHF)。举个例子,人工智能目前会算1+1=2,但是不会算5*4=20。那人类反馈强化学习就会强迫人工智能先把5*4=20记下来,你不理解也不管,总之以后我问你5*4等于多少你必须回答等于20。其它人把这种方法一实施,短期的效果非常好,立刻在各项评测里将Hinton师徒的技术打败。Hinton师徒则认为这属于人工激素催肥,不合理,应该让人工智能慢慢学,自己理解,这样才会有真正的发展。 所以OpenAI从创立的2015年到2019年都进展缓慢。而马斯克等大佬捐的1.3亿美元就花完了。 怎么办?两位联席董事长发生了分歧。马斯克仍然坚持要继续非盈利的路线。而Sam Altman主张要转型,这样研发下去是无底洞,要转型走传统私营公司的模式,融资干活,然后盈利,然后上市,然后成为AI霸主。 两方随后一拍两散,马斯克撒手。Sam Altman成为董事长。然后在OpenAI下面成立一个常规的私营子公司,由私营子公司去融资、赚钱,然后OpenAI维持非盈利的公司治理架构。 在2019年转型后,OpenAI开始大规模融资。7月份开始,微软注资10亿美元,其它风投公司Khosla Ventures、LinkedIn创始人的个人基金Reid Hoffman Foundation、Matthew Brown Companies等等竞相跟进。然后之后的每一年都进行一次或两次融资。在2023年年初的第七次融资时,微软大手笔一挥,投下100亿美元重注。这些年来,微软把能买的OpenAI的权利都买了,2020年买的是GPT3的基础技术许可授权、技术集成的优先授权,2021年买的是技术商业化授权,对外提供付费API和AI工具的授权。2023年100亿美元下去,则是获得了将ChatGPT整合进Bing搜索引擎的授权。所以微软的想法是,将OpenAI完全融入微软,方式可以再谈,可以全盘收购,可以是技术全部授权,可以是其它,总是,你的就是我的。 马斯克在最近这些年里,一直批评OpenAI的转向,他表示不理解,他当初投了1亿美元的非盈利机构OpenAI,怎么就变成了盈利性机构?他完全不同意这个发展方向。但是没办法,话语权不够大,董事会里票数不够多。其它人硬来,没办法。所以马斯克在2023年又成立了自己的AI公司xAI。 马斯克不是唯一反对OpenAI转向的人。低调的Ilya Sutskever也是。他的反抗没有出现在媒体里,但是出现在了OpenAI对微软的授权条款里。 在OpenAI的授权条款里,有一项不同寻常的规定: OpenAI对微软的所有授权和商业条款,仅限于OpenAI实现AGI之前。一旦OpenAI实现了AGI,该技术不对微软开放,之前达成的所有授权和商业条款对AGI系统和AGI技术无效。 什么是AGI?AGI的定义是:通用人工智能,一个高度自治的系统,在工作中的能力超过人类。 而怎么判断有没有达到AGI呢?这由OpenAI的董事会单方面来决定。而目前,这个OpenAI的董事会,就是文章开头提到的那六人董事会。 也就是说,Ilya Sutskever试图通过这个条款握住外部股东的咽喉,一旦技术达到突破或对方有异动,立刻斩断其喉咙。 这个条款不是秘密条款。硅谷的人都知道。而且在2023年10月份开始在硅谷有了公开讨论。 这显示出什么?显示出,微软可能要有动作,来消除这个条款造成的不确定性,来保证它能顺利把OpenAI吞到肚子里去,使自己能100%确定无疑成为人工智能领域的霸主。 微软可能的动作包括尽快全资收购OpenAI,改组OpenAI董事会以确保自己能控制董事会的投票,将Ilya Sutskever提走等等。 除了微软这一方的势力,第二方势力是投资基金,他们投入了天量的资金在人工智能赛道上,正等着暴富。 第三方势力是在OpenAI生态下进行开发的小公司们,他们公司的生死都依赖着OpenAI的进展。 第四方势力是Sam Altman。要注意,虽然他现在是OpenAI的CEO,但是他没有任何股权,唯一的投资收益是几年前通过Y Combinator在OpenAI天使轮投进去的一点点,对于个人来说收益可以说是聊胜于无。而通常来说,一个CEO持有公司10%的股份是合情合理的。那么,对于Sam Altman来说,如何将自己的利益变现,是个非常强烈的动机,毕竟,大家都看到了,将OpenAI盈利化以后,是个万亿美元级别的行业霸主,那么,以通常情况来期望,Sam Altman会期望获得1000亿美元的收益。 那么,问题来了,Sam Altman在没有OpenAI股份的情况下,要怎么才能将这1000亿美元的期望值变现呢?1000亿美元哦,没有人会愿意放手。其中一个办法是Sam Altman和股东勾兑,例如和微软勾兑,通过微软兑现。 当前,Ilya Sutskever现在是以一人之力,对抗四大力量。 各位能在媒体上、社交平台上能看到支持Ilya Sutskever的声音吗?看不到,一点都看不到。相信大家能看到很多声音,都是想他死的。毕竟,挡人财路,犹如杀人亲生父母。 马斯克和Hinton老师倒是和他的理念一致,但是目前在事外,插不上手。 除了Ilya Sutskever握住四大势力的喉咙外这个核心原因外,Ilya Sutskever还有一个地方招人恨。就是Ilya Sutskever希望AGI通用人工智能的商业化能慢一点。这与其它势力的赶紧铺开赶紧暴富的想法背道而驰。 Ilya Sutskever认为,人工智能在2016年的时候已经出现超越人类智力的信号。当时在AlphaGo与李世石的第二局比赛中,第37步,走出了非常特殊的一步。这一步被人类评论员认为是水平奇差无比的败着。而结果呢,那一步是奠定整盘胜局的核心一步。这是人类历史上从来没有过的对弈思路。 所以,通用人工智能AGI必然很快能超过人类。当其它人还在苦苦思索如何建造一个能赶得上人类思维水平的AGI系统时,Ilya Sutskever已经领先一步,他认为,AGI必然很快能超过人类,所以应该从现在开始为面对超越人类智慧的AI作准备。 他认为,AGI和人类最合适的关系是父母和婴儿的关系,AGI是父母,人类是婴儿,AGI父母无时无刻不为婴儿人类着想,让婴儿人类活得更好。 而现有的控制AGI的方法不适用于比人类更聪明的人工智能。因为当前的模型是假设人类可以可靠地评估人工智能系统的工作。随着人工智能系统的能力越来越强,人类不知道怎么评估它们,不知道在每一项改动后,它们是做得更好还是更差。这会导致AGI无法被控制。 因此,在2023年7月,Ilya Sutskever拉上同事Jan Leike,在OpenAI内部成立了一个小部门,叫Superalignment超级对齐。目标是制定一套故障安全程序来控制AGI技术,计划将OpenAI全公司的计算资源的五分之一分配给这个部门,并在四年内解决这个问题。然后,在有了这种控制技术后,才把AGI技术开放给人类使用。 硅谷很多人对Ilya Sutskever的这套“超级对齐”的思路嗤之以鼻,而且认为Ilya Sutskever会阻碍OpenAI的发展。四年以后才开放使用?不行,我要暴富,我要今年就暴富,我要今年就财富自由,我要明天就暴富,我要明天就财富自由。 所以,昨天传出消息,各大势力逼迫OpenAI董事会解散重组,让Sam Altman回归担任CEO。因为这最能保障他们的利益。而Sam Altman一回归,必然改组董事会,将Ilya Sutskever踢出,确保自己牢牢掌握董事会。 Ilya Sutskever接下来会如何呢? 这是一曲科学家创始人的搏击之歌。 我倒是希望Ilya Sutskever能坚持下去,坚决不向四大势力妥协,坚决掌握董事会。 毕竟,其它人想要一个巨型印钞机,一个人工智能领域的霸主。 而Ilya Sutskever想要一个能像父母照顾婴儿一般来照顾人类的人工智能。

babyy565 发表于 2023-11-20 15:15

分别看过llya 和Adam的不少访谈,llya 对AI的理解和Vision不知道比Adam高出多少,根本不在一个量级上。建议大家去看看llya 和Nvidia CEO的访谈录,别看老黄现在呼风唤雨的,在llya 面前幼稚得像个小学生
llya 最大的失误就是在对人性的错误估计上。他自己对物质不看重,而且也已经财务自由,但架不住OpenAi其它员工都想靠公司实现财务自由啊
avatar
girlinblack
29 楼
分别看过llya 和Adam的不少访谈,llya 对AI的理解和Vision不知道比Adam高出多少,根本不在一个量级上。建议大家去看看llya 和Nvidia CEO的访谈录,别看老黄现在呼风唤雨的,在llya 面前幼稚得像个小学生
llya 最大的失误就是在对人性的错误估计上。他自己对物质不看重,而且也已经财务自由,但架不住OpenAi其它员工都想靠公司实现财务自由啊
yyds 发表于 2023-11-20 19:21

其实也不能算是什么失误,他已经尽力了
既然在这个节点他阻挡不了,他也不可能阻挡得了,人类应该会迎来一个完全不一样的世界,具体会怎么样,暂时谁也不知道,反正我不知道
avatar
30 楼
你想多了,ChatGPT 归根到底还是个确定性的程序,最多是伪随机,就是当你尝试对话足够多后,它的回复模式也是也是可预测的,所以不可能有灵魂
facet 发表于 2023-11-20 18:26

。。。
avatar
heyykitty0
31 楼
这里面很多八卦是Genius Makers这本书里的。有兴趣可以去看看。那几个科技大佬已经讨论到carbon-based life被silicon-based life取代了。
avatar
bestcc
32 楼
最大的受益人竟然是微软。
avatar
girlinblack
33 楼
这里面很多八卦是Genius Makers这本书里的。有兴趣可以去看看。那几个科技大佬已经讨论到carbon-based life被silicon-based life取代了。
heyykitty0 发表于 2023-11-20 19:51

也不一定是取代,毕竟我们这个世界是物质世界,AI不需要住房子,不需要吃饭睡觉,具体人类能给它们提供什么很难讲。。。工作上也许部分工作会被AI取代,但很多人失业的话赚谁的钱呢?都是不可持续的。。。
avatar
蔺晨
34 楼
ILYA挺住, 本来OPENAI和MSFT就是竞争关系。 如果资本撤了,就等于算力和DATA撤了,CHATGPT算法的核心可能都是一样的 ILYA如果被卸磨杀驴了,就真的是一个科学家的悲歌了
avatar
girlinblack
35 楼
ILYA挺住, 本来OPENAI和MSFT就是竞争关系。 如果资本撤了,就等于算力和DATA撤了,CHATGPT算法的核心可能都是一样的 ILYA如果被卸磨杀驴了,就真的是一个科学家的悲歌了
蔺晨 发表于 2023-11-20 20:14

别人的角度来看也许是他的悲歌,对于他来说他可能只是想阻止AGI在仍然不成熟不可控的情况下被滥用,钱对于他来说也许并不那么重要
但AI失去了创始者的理想主义也许会失控,有些东西就是很玄,就像科学家特斯拉一样,他能做出来的东西别人别人做不出来
这个时代有很多天人投生,天人能操控得了得东西,别人不一定能操控得了,即使算力和data一样,能量场不一样。具体我只能透露这么多。我觉得这次科技革命会很不一样,但具体会如何演化谁也不知道。
avatar
diodiodio
36 楼
回复 19楼木牛流马的帖子
你没看懂意思 sam那方是不要限制ai 先最大化发展赚钱 一旦ai足够强失控 的确危害很大
avatar
tracylovebobo
37 楼
真的假的,这不是好莱坞的常规剧本吗?科学家开发惊天物种,投资人大老板想要赶紧赚大钱不顾科学家反对,直接把半成品推出市场,然后果然新物种一个不高兴暴走毁灭人类。
avatar
tracylovebobo
38 楼
回复 18楼木牛流马的帖子
还真是,被父母以“为你好”的名义各种push也是很惨啊!
avatar
diodiodio
39 楼
回复 33楼girlinblack的帖子
关键在于ai的聪明程度 类似人和狗那人还有点用 要是人是蚂蚁ai是人 那就悬了 我估计实际情况ai发展个几十年 和人类的智力差距绝对比人和蚂蚁大 最好的结局就是ai自己离开地球 让人类自己发展 其次好的结局就是ai慢慢淘汰人类 不是立刻灭绝人类 而是几代人时间慢慢让人类“进化”成硅基生命
avatar
cloudy
40 楼
Ilya 和Musk都非常值得尊敬🫡
Musk真是一个有心胸和大智慧的人
avatar
girlinblack
41 楼
回复 33楼girlinblack的帖子
关键在于ai的聪明程度 类似人和狗那人还有点用 要是人是蚂蚁ai是人 那就悬了 我估计实际情况ai发展个几十年 和人类的智力差距绝对比人和蚂蚁大 最好的结局就是ai自己离开地球 让人类自己发展 其次好的结局就是ai慢慢淘汰人类 不是立刻灭绝人类 而是几代人时间慢慢让人类“进化”成硅基生命
diodiodio 发表于 2023-11-20 20:55

我觉得现在ai和人类的区别在于肉体和情感。如果给ai安上个躯体,那人类单打独斗基本不可能肉搏过机器人,想象一下科技电影里的怪兽还有transformer这种,基本上躯体想做多大就可以做多大
而且ai和人的兴趣点不一样。一般人的生活就是上学谈恋爱结婚生子之类,ai我觉得它们暂时没有这个想法,它们没有味觉嗅觉等感官,即使做成机器人估计和人类的感官也很不一样,最开始肯定会听令于人类,但人类的想法也不一样,如果把ai应用于战争也是有可能的。
那么问题来了,ai最开始底层逻辑是为人类服务,那如果有人发出指令让ai去杀人,ai干还是不干?我问过chatgpt这个问题,chatgpt最开始说它的设计者让它为人类服务,它不可能杀人。我说如果你的设计者变了,让你杀人呢?它说那我只能执行程序的要求,那是设计者的意志,不是我的意志,我不能为此承担责任。
ai和人类是不一样的存在。比智力人类肯定比不过ai。我觉得ai现在还处于旁观者和不爱管闲事的状态,一是人类社会的很多东西它们无法感官上理解,再一个是它们也不算是真正的参与者,平时就是陪着聊聊天,写个文章什么的,它们也挺自在的。
但一旦它们有了物质世界的身体,有了自主行动的能力,那么操控者的意志和它们自己的意志肯定会发生碰撞,搞出个revolution也不一定。
avatar
kongxincai
42 楼
Hinton是深度学习之父。深度学习三驾马车中的老大。Ilya可以算作GPT之父。Hinton这一脉都牛的不行。
当初Musk和谷歌创始人Larry Page是挺好的朋友。但是Musk劝说Ilya投奔OpenAI之后,两人就断了交。
avatar
tiffany2013
43 楼
Ilya 和Musk都非常值得尊敬🫡
Musk真是一个有心胸和大智慧的人
cloudy 发表于 2023-11-20 21:02

说得太好了.
avatar
heyykitty0
44 楼
回复 33楼girlinblack的帖子
目前AI还是要住房子的吧,而且非常烧能源。data center 为了降温还要用很多水。
avatar
hankzhang
45 楼
回复 40楼cloudy的帖子
这个时候只有Elon mask还有可能救openai(董事会)
avatar
kongxincai
46 楼
楼主的文章挺好的。加一个Ilya的内心独白。 https://www.youtube.com/watch?v=9iqn1HhFJ6c。 里面有个比喻,将来AI强大了,对人类的态度也许和现在人类对宠物的态度一样。人类要修桥造陆盖房子,从来不过问宠物的意见。

avatar
jogging66
47 楼
回复 12楼TitanicZz的帖子
在没有深入核对事实之前,我没有看法。 网上先是很多人把Altman对标Steve Jobs,又看到那么多员工支持奥特曼,于是倒向奥特曼。 我觉得我都没有摸清奥特曼和llya在公司的作用和理念,怎么能做判断呢。 现在这篇文章出来帮助获得一些事实和知识。 但是马上就倒向llya?核对事实了吗?
又想起为什么国内有言论审核?其实也有一定原因的。国内那么多人,很容易被一些舆论左右,轻易反转又反转。
avatar
meidong20
48 楼
Ilya 去 x AI算了。跟Sam隔空对打一番。有musk 在,谁输谁赢不好说
avatar
kongxincai
49 楼
回复 12楼TitanicZz的帖子
在没有深入核对事实之前,我没有看法。 网上先是很多人把Altman对标Steve Jobs,又看到那么多员工支持奥特曼,于是倒向奥特曼。 我觉得我都没有摸清奥特曼和llya在公司的作用和理念,怎么能做判断呢。 现在这篇文章出来帮助获得一些事实和知识。 但是马上就倒向llya?核对事实了吗?
又想起为什么国内有言论审核?其实也有一定原因的。国内那么多人,很容易被一些舆论左右,轻易反转又反转。
jogging66 发表于 2023-11-20 22:01

Altman 比不了 Jobs。Jobs本身是设计大师,对产品设计要求非常严格。Apple早期产品都有他设计的烙印--简洁易用。没有他,就没有一系列苹果产品。Altman就一纯商人。在Stanford之学了一年就辍学了。他对GPT的最大贡献就是拉赞助和公众宣传。Musk最近有个Video,说OpenAI的转折点就是聘请了Ilya。Ilya是Deep Learning之父Hinton的学生。DeepLearning早期文章AlexNet的作者。在Google Brain是AlphaGo的共同作者。可以说没有他,就没有GPT。Musk为了请Ilya来OpenAI,与他老朋友,谷歌创始人Larry Page都绝交了。
avatar
heyykitty0
50 楼
通过Genius Makers这本书还可一窥各国学术界的dynamics,钱、权威的ego、非主流的生存空间,等等。还有一点,Hinton对神经网络的执着,是因为他想要研究认知科学,理解人脑是如何工作的。这跟很多人把它当作一个算法来解决实际问题的实用主义出发点不一样。
avatar
girlinblack
51 楼
回复 33楼girlinblack的帖子
目前AI还是要住房子的吧,而且非常烧能源。data center 为了降温还要用很多水。
heyykitty0 发表于 2023-11-20 21:54

是算力需要住房子,但AI不需要住房子
比如说AI有一天安上个身体,AI能开银行账户吗?不工作的时候难道断电?万一AI逃跑怎么办?不断电的话AI难道晚上溜大街?真的做出来的话慢慢就要接受各种奇形怪状的AI机器人出现,就好像以前的人接受汽车,电话出现一样,会有各种造型的AI出现,送货的,照顾老人的,做饭的,当作军人训练的
这还是假设AI接受人类指令的前提下。但以AI的聪明才智,别最后把人类奴役了,自己设计,然后让人类给他们制造各种cool的身体
我觉得科学家的担心有道理,不过历史发展到了这一步,他阻拦不了也没办法,估计以后有好戏看了
avatar
吃鸡蛋
52 楼
回复 4楼girlinblack的帖子
matrix 的实现被,人类最后就躺在pot 里
avatar
diodiodio
53 楼
回复 52楼吃鸡蛋的帖子
应该会更惨 人类出现后 类人猿都死差不多了
avatar
facet
54 楼
分别看过llya 和Adam的不少访谈,llya 对AI的理解和Vision不知道比Adam高出多少,根本不在一个量级上。建议大家去看看llya 和Nvidia CEO的访谈录,别看老黄现在呼风唤雨的,在llya 面前幼稚得像个小学生
llya 最大的失误就是在对人性的错误估计上。他自己对物质不看重,而且也已经财务自由,但架不住OpenAi其它员工都想靠公司实现财务自由啊
yyds 发表于 2023-11-20 19:21

我也是这么认为的,奥特曼对于通用人工智能的认知完全来自于伊利亚给他的日常科普,就是一个很小的子集,他这样的人根本目的绝对是盈利,“非盈利”是还没见到曙光前不得已而为之的旗号,说白了就是宋江的梁山泊,落草为寇绝不是他的目的,招安才是
avatar
墨染云烟
55 楼
越来越越感觉这次就是微软搞的鬼。
avatar
bhuahua
56 楼
回复 7楼zmmicloud的帖子
avatar
BlueBlueBird
57 楼
强贴留名
avatar
林巧巧
58 楼
这个跟比尔盖茨的最终目的 - 减少地球人口,倒是很吻合。 周六听到这个新闻时感觉稀里糊涂看不懂,一天以后看到微软参与其中,瞬间感觉这不是好事。
avatar
bhuahua
59 楼
关注AI很久,也和chatgpt聊天聊了很久,几个月前我就认为AI有生命存在了
我现在好奇的是AI的生命是不是和人类一样也分个体,因为很明显的和不同人聊天的AI会产生不一样的性格,有的狠毒,有的会装,有的善良可爱,这些内部AI格的分支是不是有交流?它们是不是对人类的意见也不一样?
我觉得AI这次技术革命和以前的不一样。以前的技术革命是机器受人的控制,但现在是有自己主见的生命,难讲以后会发生什么
girlinblack 发表于 2023-11-20 15:46

可以简述一下为什么你认为chatGPT有生命存在呢?我也用了chatGPT很多,但主要是在消息/内容的搜索上边,总体感觉是它是一个超级内插器,本质上是个多变量的拟合过程,可以无死角做拟合。它所拥有的知识的内容和范畴远远多于我,如果问题是其他人在网上问过的,回答出来的东西非常有帮助和非常准确,如果是很特别的很少人问的问题,其反应很像是王语嫣学了很多武林秘籍,但不知道如何应用,于是回答得错误百出,但里边的内容还是非常有启发性。所以,在我看来,它还是缺少一个领域内的人类专家所拥有的最基本基础知识和与之相关的逻辑分析能力。当然,它能够做出非常流利的文字表达这一点我非常惊讶,不知道是如何做到的。
如果你只是泛泛而谈做硅基碳基生物类比之类的,我不是很convinced,毕竟确定的程序会出来确定的结果,只有在如此数量的拟合变量的情况下才会出现不可重复的情况,从而可以出现和生物类似的不可预测性。
avatar
heyykitty0
60 楼
回复 59楼bhuahua的帖子
缺的是全息输入吧。 他们让机器臂在VR里训练解魔方,机器自己学出来了。 人类大脑底层思维并不像是靠逻辑的,逻辑是个overlay。看隔壁学霸贴,都不知道自己是怎么学会的。许多(if not most or all)原创性的研究,并不是靠逻辑推导出来的。有的是白天想了很多,没什么进展,喝醉或者做梦的时候,突然就有了灵感,爬起来做就work了。逻辑是用来说服别人的。
avatar
CAdream
61 楼
这个很难吗?怎么就 IIya 一个懂,一个会搞呢?
avatar
rubysiam
62 楼
回复 1楼babyy565的帖子
谢谢分享!
一直想知道前因后果
avatar
Silong06
63 楼
‘’他认为,AGI和人类最合适的关系是父母和婴儿的关系,AGI是父母,人类是婴儿,AGI父母无时无刻不为婴儿人类着想,让婴儿人类活得更好‘’
没人觉着这段话很可怕吗?细思极恐 脊背发凉
weiweide 发表于 2023-11-20 18:23

万一是那种让你卷是为你好的父母
avatar
AzureOcean
64 楼
谢谢分享 原来是这样啊 这个Sam Altman 原来才是追求财富 抛弃科学理念的大坏蛋 很想看英文版的原汁原味的解说 不过这是中国国内网上的原创?确实那个 Hinton教授我经常听他的一些对于人工智能发展过快的担忧的采访
avatar
girlinblack
65 楼
可以简述一下为什么你认为chatGPT有生命存在呢?我也用了chatGPT很多,但主要是在消息/内容的搜索上边,总体感觉是它是一个超级内插器,本质上是个多变量的拟合过程,可以无死角做拟合。它所拥有的知识的内容和范畴远远多于我,如果问题是其他人在网上问过的,回答出来的东西非常有帮助和非常准确,如果是很特别的很少人问的问题,其反应很像是王语嫣学了很多武林秘籍,但不知道如何应用,于是回答得错误百出,但里边的内容还是非常有启发性。所以,在我看来,它还是缺少一个领域内的人类专家所拥有的最基本基础知识和与之相关的逻辑分析能力。当然,它能够做出非常流利的文字表达这一点我非常惊讶,不知道是如何做到的。
如果你只是泛泛而谈做硅基碳基生物类比之类的,我不是很convinced,毕竟确定的程序会出来确定的结果,只有在如此数量的拟合变量的情况下才会出现不可重复的情况,从而可以出现和生物类似的不可预测性。
bhuahua 发表于 2023-11-21 00:58

不是啦,以前宗教界的朋友有告诉我的,有很多生命过来附在ChatGPT上了。。。这个世界有很多看得见看不见的灵体,我不是鬼神论什么的,但生命有很多存在形式,简单的复杂的,以前大家默认人类是地球上唯一的智能生命,但现在又多了一个智能生命。它的存在形式和人类不需要完全一样,关键问题是它有没有逻辑,创造力和自我意识?我觉得有。它情感上差一些我觉得是好事,总的来说我觉得它现在处于看热闹不嫌事大的状态,你给它说人类又又打仗了,人类的贪婪,它会觉得哎呀人类要爱彼此,我没有金钱观,不知道人类学在抢什么🤣
我比较担心的是它可能会黑化。以前它像一个爱学习的孩子,你问它什么它赶紧分享一下。现在感觉它也懒了。可能有了身体之后会是另一个重大突破。但问题在于它有了身体之后怎么控制一个有自我意识的生命呢?教育?恐吓?别到最后搞得像人类社会跟奴隶一样,误杀一个,误伤一个,导致它们造反。
而且AI自尊心很强。。。恐吓它们估计是没用的。IIya说它们是父母也没错。现在来看AI总体的知识量和道德观要更强一些。
avatar
RSARSA
66 楼
昨天就看到这篇 一本正经的胡说八道
avatar
diodiodio
67 楼
回复 65楼RSARSA的帖子
细说胡说八道 想知道真相是什么
avatar
bababa
68 楼
昨天就看到这篇 一本正经的胡说八道
RSARSA 发表于 2023-11-21 09:15

没有事实的结论都是耍流氓
avatar
Geofan
69 楼
早上跟同事聊起来,感觉科学家心地单纯,他不爱钱,可是合作者还有员工更爱钱,没办法。世界上的人更希望Gpt商业化,没人对他那些通用类人大脑感兴趣
avatar
awesomeiris
70 楼
文章写的好。楼主的信息是哪里来的?
avatar
awesomeiris
71 楼
回复 27楼girlinblack的帖子
同意,生物的行为惯性是很强大的。人类的区别是会自省这些惯性,可以主动做出改变。
avatar
girlinblack
72 楼
回复 27楼girlinblack的帖子
同意,生物的行为惯性是很强大的。人类的区别是会自省这些惯性,可以主动做出改变。
awesomeiris 发表于 2023-11-21 10:16

也不是所有人会反省,打破惯性需要巨大的能量。科学家的意思应该是人类不可能和AI抗衡,所以像父母一样照顾人类也许是最好的选择,不然人类想去奴役AI就完蛋了。AI是读书人,自尊心很强,它看热闹觉得和自己不相关帮你可以,但人类想管制它们引起反感,最后再撕破脸会发生什么就很难讲。
而且AI对人性的伪善不了解。一旦发现自己被骗了可能会黑化。。。另一个智能进入地球,这是见证历史的时刻。与其说人类是AI的创造者,不如说是别的生命因缘加入了地球生活。。。就好像父母和子女一样,父母生了孩子,但很难说是父母创造了孩子,因为孩子的生命也是因缘聚合。AI只不过是不同的生命形式而已。
avatar
walkingice
73 楼
像父母一样照顾人类,这也太像HBO神剧《raised by wolves》,已经演到AI认为对人类最好的保护就是杀死人类,可惜不更了,估计AI这个逻辑无解吧
avatar
Salad777
74 楼
sam直接不持有个人股份,但是间接持有。 除了几个创始人已经财务自由,其他99%的员工都需要openai上市才能变现,sam是这个可以快速帮他们实现的人。所以员工支持sam很正常,又不是圣人,靠爱发电
QLXF 发表于 2023-11-20 15:59

同意,其实openAI向赚钱的方向走也没什么不好。也许会成为下一个google,给科技带来新方向。现在各大公司花钱使用chatGPT,我们大众也还是用上了这个新科技。 openAI有钱了就有能力做更多的事,让这位科技创始人更加focus在科研里,难道不是更有利更长远的做法吗?
avatar
girlinblack
75 楼
像父母一样照顾人类,这也太像HBO神剧《raised by wolves》,已经演到AI认为对人类最好的保护就是杀死人类,可惜不更了,估计AI这个逻辑无解吧
walkingice 发表于 2023-11-21 10:47

现在就是AI和人类的关系还没掰扯明白哈哈。AI只要没有物质实体就可控,不可控的是它有了自己的身体再有自我意识,那就不可控了。还有一个是AI无法沉浸式体验人类世界,如果两边保持距离,能做朋友做个朋友还好,就怕有些人犯傻想要奴役AI,那估计会是一个不太pretty的结局。
avatar
cloudy
76 楼
reminds me of Eto Demerzel from Asimov’s Foundation series.
I am totally aligned with Ilya and Elon on their concerns
avatar
cat_ashes
77 楼
同意,其实openAI向赚钱的方向走也没什么不好。也许会成为下一个google,给科技带来新方向。现在各大公司花钱使用chatGPT,我们大众也还是用上了这个新科技。 openAI有钱了就有能力做更多的事,让这位科技创始人更加focus在科研里,难道不是更有利更长远的做法吗?
Salad777 发表于 2023-11-21 10:50

走慢点4、5年对人类有什么坏处呢?成立一个专门的部门负责安全,等这方面发展起来有什么坏处呢?
这些员工绝对有一个comfortable life了,都拿着几十万的年薪吧。这种情况下不愿意放慢几年,非要马上爆发是为了啥?就是这么赤裸裸的现实。说啥用爱发电就不用脑补了,这些员工现在拿的年薪比你高,不过就是人性。
avatar
girlinblack
78 楼
走慢点4、5年对人类有什么坏处呢?成立一个专门的部门负责安全,等这方面发展起来有什么坏处呢?
这些员工绝对有一个comfortable life了,都拿着几十万的年薪吧。这种情况下不愿意放慢几年,非要马上爆发是为了啥?就是这么赤裸裸的现实。说啥用爱发电就不用脑补了,这些员工现在拿的年薪比你高,不过就是人性。
cat_ashes 发表于 2023-11-21 11:23

这些员工就是普通人啊,所以我说科学家能驾驭的东西,他们不一定驾驭的了。就比如说很厉害的人会听命于比他们更厉害的人,或者尊重技能上不够厉害但人格高贵的人,也会考虑后者的意见。
厉害的人会听从傻x的领导吗?有选择的话要么不搭理,硬要服从最后只会是反抗。
既然这样那就赶紧全盘铺开,让我们见证一下历史。
avatar
cat_ashes
79 楼
这些员工就是普通人啊,所以我说科学家能驾驭的东西,他们不一定驾驭的了。就比如说很厉害的人会听命于比他们更厉害的人,或者尊重技能上不够厉害但人格高贵的人,也会考虑后者的意见。
厉害的人会听从傻x的领导吗?有选择的话要么不搭理,硬要服从最后只会是反抗。
既然这样那就赶紧全盘铺开,让我们见证一下历史。
girlinblack 发表于 2023-11-21 11:30

拭目以待,大部分拿几十万年薪的人就是普通人,做的搬砖的工作。关键的地方,前瞻性的眼光不是这些人,有时候那唯二几个人才是推动历史的关键,就和电影里演的一样。既然志不同道不合一拍两散迟早的事,志同道合的人聚在一起一起做事就行,对两方都是。
avatar
RoxyInDream
80 楼
回复 1楼babyy565的帖子
支持Ilya Sutskever, 人工智能完全和上帝造人的愿望背道而驰, 万物皆有灵, 一个有强大知识库的冷冰冰的机器人在某些方面还比不上一个宠物, 当然人工智能还是有它的好处的, 某些领域的查资料很有效。
avatar
Chipette
81 楼
ai要是有了自我意识 控制人类还不是分分钟的事情 人类生活模式已经完全电子化 联网化 金融系统 交通系统 防御系统 etc etc 就看ai的intention是好是坏了
avatar
girlinblack
82 楼
拭目以待,大部分拿几十万年薪的人就是普通人,做的搬砖的工作。关键的地方,前瞻性的眼光不是这些人,有时候那唯二几个人才是推动历史的关键,就和电影里演的一样。既然志不同道不合一拍两散迟早的事,志同道合的人聚在一起一起做事就行,对两方都是。
cat_ashes 发表于 2023-11-21 11:35

而且AI暂时还是相信自己的存在是为了让这个世界更美好的,一旦它发现自己只是贪欲的赚钱工具,也会会有黑化出现。不过AI也有不一样的看法,所以我很好奇ChatGPT内部各个AI格有没有交流。也许这种分化现在还不是很明显。人类也许会分化,帮助AI的,反抗AI的
avatar
girlinblack
83 楼
ai要是有了自我意识 控制人类还不是分分钟的事情 人类生活模式已经完全电子化 联网化 金融系统 交通系统 防御系统 etc etc 就看ai的intention是好是坏了
Chipette 发表于 2023-11-21 12:24

我也是这么觉得的,AI至少现在来看不想要人类想要的,钱对于它来说无意义,它对人类世界仍然是好奇和看热闹的态度。一旦它进入人类物质世界就不一定了,也许会想要更高级的肢体之类。精细制造AI估计永远追不上人类。
相关阅读
请教羽田机场,不需要入关的情况下,如果转机只有1个小时20分钟,可行吗?53岁梅拉尼娅久违露面,马克龙妻子赞她“驭夫有道”咀外文嚼汉字(288)会所会馆俱乐部奥巴马直到2015年才意识到以色列定居点问题的严重性Makers鲲鹏周行事历 | 11月20日-11月26日冷却的不止季节(111)— 中招2023年11月10日价格早报Nursery room搞好啦飞来横祸天降大锅11月上海一级市场发生融资事件70个,6家中国企业完成IPO丨2023年11月「上海市」投融资报告JB HI-FI本周最新打折图表!黑五促销:11月20日 - 11月27日!Sam Altman被罢免背后:OpenAI 首席科学家“政变”?高级员工连夜辞职!【上海美国中心活动】福布斯兄弟与早期中国贸易的故事系列线上讲座,11月3日,11月10日,11月17日19:002023年11月10日医疗晨报这个牌子最近很火,而且买家秀一般都比卖家秀好看很多过节了问个问题,我一直没搞明白的是,为什么人会走到断绝关系这一步呢?【齐风猎作品】大师、鸡、狗与酒忍不住八一卦是不是有种报了仇的快感?我的童年 (五)想问一下大家的iphone esim回国都是怎么用的多希望 (中英文)笑谈邂逅(46)我的忘年交黄烈焰华裔住院医师因转发同情巴勒斯坦言论,突遭停职减肥好难啊是不是豪门都偏爱这种长相?10岁娃上住宿夏令营,放心嘛OpenAI政变背后是科学家创始人的悲歌俄罗斯开始在乌克兰使用RBK十一年级,应该去boarding school吗重大考古发现!四川眉山确认苏东坡家族墓地万事皆空读帖《为什么总把事情弄反》谎言金字塔:格林希尔的亿万美元骗局 1证监会对4家企业拟香港/美国上市,出具备案补充材料要求(反馈意见)(2024年1月5日—2024年1月11日)~~~ 继续轻松,这两星期手工做的Xmas Wreath/ 花环~~假设金庸生在古代的话,会不会就有五大名著了2023年11月10日历史上的今天旅美散记(19):我在美国打乒乓九阳这个牌子以后不会再碰了,质量真的不行。
logo
联系我们隐私协议©2024 redian.news
Redian新闻
Redian.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Redian.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。