Redian新闻
>
大神回归学界:何恺明宣布加入 MIT

大神回归学界:何恺明宣布加入 MIT

科技

机器之心报道

编辑:泽南、蛋酱

何恺明的目标是:探索面向复杂世界的智能。


「作为一位 FAIR 研究科学家,我将于 2024 年加入麻省理工学院(MIT)电气工程与计算机科学系 EECS 担任教职。」


AI 领域的著名学者,ResNet 发明人何恺明,最近在个人网站上宣布即将回归学界了。


恺明甚至换上了全新的头像。


在最近科技公司竞争大模型、AIGC 新增长点的背景下,何恺明选择投身研究,做出了一个有引领性的选择。


对此人们纷纷表示欢迎,「他的学生该有福了」:


不知道未来是否会有年轻一代学会何恺明大道至简的研究风格。


也有人表示,希望他在加入 MIT 之后仍可以和 Meta 保持紧密联系,因为即使贵如 MIT 也没有业界实验室那样丰富的 GPU 算力资源。


感叹之外,人们纷纷开始预测何恺明未来的科研方向。从他个人网站上的叙述来看:「通过计算机视觉问题的视角,我的目标是开发适用于各个领域的通用方法。我目前的研究重点是构建可以学习复杂世界表示的计算机模型,并探索面向复杂世界的智能。我研究的长期目标是通过更强大的人工智能来增强人类智能。」


这可能意味着与现实世界互动的 AI,是机器人?


众人聚焦的转会


何恺明的去向在四个月前成为了 AI 领域人人关注的话题。


今年 3 月,很多人发现 MIT 的网站上出现了一条特别演讲预告。


 

在 MIT 的 EECS,此类「特殊研讨会」通常是前来申请职位的学者进行的「面试」,其内容主要是展示求职者的研究成果。没想到作为学术明星的何恺明的一场小活动成为了大型追星现场,活动当天会议室爆满之后 MIT 不得不临时加开投屏房间,结果远程观看的房间依然爆满。


图片来自知乎


可见人们对于这位大神的认可度。


据参与活动的同学透露,在这场演讲过程中何恺明主要介绍了 ResNet、Faster R-CNN、Mask R-CNN、MoCo、MAE 等过去他完成的研究。另外还对未来进行了一定程度的展望,其中包括 AI 作为一个通用工具帮助各个科学领域开展研究,以及自监督学习的更广泛应用。


在 MIT 之行结束后,何恺明近期还曾在纽约大学、普林斯顿进行过演讲。


从高考状元到顶尖 AI 科学家


何恺明是我们耳熟能详的 AI 科学家之一,在计算机视觉领域没有人不知道他的大名。


2003 年,何恺明以标准分 900 分获得广东省高考总分第一,被清华大学物理系基础科学班录取。在清华物理系基础科学班毕业后,他进入香港中文大学多媒体实验室攻读博士学位,师从汤晓鸥。何恺明曾于 2007 年进入微软亚洲研究院视觉计算组实习,实习导师为孙剑博士。


2011 年博士毕业后,何恺明加入微软亚洲研究院工作任研究员。2016 年,何恺明加入 Facebook 人工智能实验室,任研究科学家至今。


何恺明的研究曾数次得奖。2009 年,汤晓鸥教授、孙剑博士和当时博士研究生在读的何恺明共同完成的论文《基于暗原色的单一图像去雾技术》拿到了国际计算机视觉顶会 CVPR 的最佳论文奖,也是该会议创办二十五年来首次有亚洲学者获得最高奖项。


汤晓鸥与何恺明


2016 年,何恺明凭借 ResNet 再获 CVPR 最佳论文奖,此外,他还有一篇论文进入了 CVPR2021 最佳论文的候选。何恺明还因为 Mask R-CNN 获得过 ICCV 2017 的最佳论文(Marr Prize),同时也参与了当年最佳学生论文的研究。


根据 Google Scholar 的统计,何恺明一共发表了 73 篇论文,H Index 数据为 67。截至 2023 年 7 月,何恺明的研究引用次数超过 46 万次,并且每年以超过 10 万次的速度增长。



这是个什么量级呢?简而言之,他加入 MIT 之后会立刻成为该校论文引用量最高的学者,不限学科,没有之一。


那些年,恺明发表过的「神作」


说起恺明大神的作品,最有名的就是 ResNet 了。这篇论文发表于七年前,迄今引用已经超过十七万。



《Deep Residual Learning for Image Recognition》在 2016 年拿下了计算机视觉顶级会议 CVPR 的最佳论文奖。该论文的四位作者何恺明、张祥雨、任少卿和孙剑如今在人工智能领域里都是响当当的名字,当时他们都是微软亚洲研究院的一员。



同样是大神级别的学者李沐曾经说过,假设你在使用卷积神经网络,有一半的可能性就是在使用 ResNet 或它的变种。


何恺明有关残差网络(ResNet)的论文解决了深度网络的梯度传递问题。这篇论文是 2019 年、2020 年和 2021 年 Google Scholar Metrics 中所有研究领域被引用次数最多的论文,并建立了现代深度学习模型的基本组成部分(例如在 Transformers、AlphaGo Zero、AlphaFold 中) )。


如今大模型都在使用的 transformer 的编码器和解码器,里面都有源自 ResNet 的残差链接。


「在 ResNet 之后就可以有效地训练超过百层的深度神经网络,把网络打得非常深,」在 2023 世界人工智能大会的演讲中,汤晓鸥对何恺明的学术贡献不吝赞美:「何恺明把神经网络做深了,谷歌把神经网络的入口拉大了,又深又大,才成为今天的大模型。」


2021 年 11 月,何恺明以一作身份发表论文《Masked Autoencoders Are Scalable Vision Learners》,提出了一种泛化性能良好的计算机视觉识别模型,同样是刚刚发表就成为了计算机视觉圈的热门话题。


 

一个初入 AI 领域的新人,在探索的过程中看到很多重要研究主要作者都是何恺明,经常会不由得感到惊讶。何恺明虽然长期身处业界,但科研态度一直被视为标杆 —— 他每年只产出少量一作文章,但一定会是重量级的,几乎没有例外。


我们也经常赞叹于何恺明工作的风格:即使是具有开创性的论文,其内容经常也是简明易读的,他会使用最直观的方式解释自己「简单」的想法,不使用 trick,也没有不必要的证明,有的只是美丽的直觉。


如今回归学界,期待恺明能带来更多惊艳之作。


参考内容:

https://www.csail.mit.edu/event/eecs-special-seminar-kaiming-he-pursuit-visual-intelligence

https://www.zhihu.com/question/588205714


「Llama 2 大模型算法与应用实践」——机器之心 AI 技术论坛来了!

8月26日,与资深大模型技术专家一起相聚北京,拆解 Llama 2 算法与应用,动手搭建一个私有大模型。

论坛为期 1 天,内容包括 Llama 2 算法解读、基于 Llama 2 开发中文大模型、Llama 2 案例解读和应用实践等。通过本场分享,你将系统了解到 Llama 2 背后的技术以及潜在的应用场景,为即将到来的「大模型安卓时代」做好准备。


售票通道已开启,机器之心为读者朋友准备了「早鸟优惠」,赶快扫描下图二维码领取限时福利吧!


© THE END 
转载请联系本公众号获得授权
投稿或寻求报道:[email protected]

微信扫码关注该文公众号作者

戳这里提交新闻线索和高质量文章给我们。
相关阅读
庆祝建会110周年丨深圳欧美同学会:营造国际一流的创新创业环境,推动实现“人回归、心回归、事业回归”加拿大再次宣布加息25个基点! 利率飙至22年来最高水平…何恺明官宣加入MIT,正式回归学术界!花儿这ABC太牛了! 横扫哈佛、MIT、普林斯顿 自学物理夺奥赛金牌「向往生活」惊喜合体 谢娜:何炅是无条件爱我的人 周润发生气了?上海晨跑遭围拍黑脸人民日报一篇老文,非常罕见:何副厅长病了新生自选大学宿舍:何谓理想的初次分配与再次分配机制34岁奚梦瑶近照曝光,学霸气质凸显, 网友惊呼:何猷君究竟对你做了什么?地方动态丨“中国工业向未来 海归学长进汽博”活动举办,首都留学报国教育基地再挂牌!可怕!日本即将开始核废水排海,专家分析:何时流到澳洲?危害?突发!耶鲁、哥大、MIT…17所大学被告上法庭CS课程要求, Georgia tech vs MIT, CMU, Princeton《紅杉樹》教育界研究:何时需要外界照管孩子?何时孩子可自主管理?OpenAI使用GPT-4审核内容;腾讯MaaS上架20+主流模型;孙剑何恺明等获未来科学大奖ResNet孙剑何恺明团队加冕未来科学大奖!旷视张祥雨成该奖项最年轻获奖人换机油众神回归的维密大秀,还能再造辉煌吗?突发!加拿大央行宣布加息25个基点!楼市刚复苏又现波动!法律翻译|Bodil Lindqvist案件:何为《95指令》的适用范围?ED 宾大 / EA MIT 同时录取,入读MIT,Milton Academy 真实案例荷兰多所高校宣布加强针对中国留学生的限制英国宣布加息至5%,近15年来最高水平!| 5月英国租金年增长率达到5%,创下近七年来的最高水平90后首次现身!何恺明、孙剑团队斩获未来科学大奖,ResNet被引18万刚刚,美国宣布加息,告诉我们4大信息学长风采丨海归学长张睿睿团队研发“蓉宝”机器人亮相成都大运会血色紅杉 - 你帶來了美國人民的深情秋分:何事最相宜,宜游宜从容数读英国法律服务市场:何以持续引领全球?罗刹海市:何必盯着几个歌手,不妨看看刀郎的用意4A景区千年古寺火灾:何以保护废墟中的大佛?何恺明即将入职MIT!澳洲四大银行纷纷宣布加息!澳联储第12次上调利率,通胀率仍然持续走高...木心,陈丹青及王朔海淀妈妈:我,海归学霸、谷歌高管,花千万买学区房,结果我的娃却是这样......AI大牛何恺明加入MIT;杭州设5000万元/年算力券;华为被曝为大模型成立两大组织丨AIGC大事日报纽森州长宣布加大与旧金山联合执法《令人心动的offer5》首播引热议!隐藏海归学霸,无法再低调了...Asian MIT grad asks AI to make her photo more professional
logo
联系我们隐私协议©2024 redian.news
Redian新闻
Redian.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Redian.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。