Redian新闻
>
从入门深度学习到能发顶会,你用了多久?

从入门深度学习到能发顶会,你用了多久?

公众号新闻

最近刷朋友圈,很多童鞋的状态都是,不是在搞科研,就是在搞科研的路上,每日为了科研废寝忘食……

每天的生活日常,除了下文献、读文献,就是做实验、写论文,debug,二十多岁的自己看着像三四十……

然而,结果好像并不和努力成正比。不说发顶会无望,写一篇不水的论文都不是件容易的事。那些学术大牛们,怎么就可以手握多篇顶会论文还笔耕不辍,似乎发一篇高质量的论文是分分钟的事,他们究竟有什么独门秘籍?

最近就有做预训练模型的科研er私信吐槽:

想水论文!奈何导师只负责分配研究方向,然后就当甩手掌柜。

想发论文,却没有丁点思路,不知道从哪开始入手,代码也无人指导……

你需要一些来自大神的指点和点拨。

扫码免费听课

1025日大神带你一节课掌握预训练模型

获取容易发论文的创新点

文末免费领超20G资料、课程福利


以GPT-3为代表的千亿参数模型,为我们展示了通用人工智能的某种实现路径:增大模型规模,从量变到质变。横亘在大模型之前的一个重要问题是,我们如何高效地利用好大模型,传统的pretrain-finetuing范式,会让大模型的每一次适配下游任务存储和训练成本都变得高昂。


parameters-efficient tuning方法应运而生,本期直播课便是为大家讲解如何通过参数高效的训练方法,利用好更大规模的模型。


预训练作为一个大的研究方向,卷起来了但是又不是那么卷,对于科研er来说,在这个方向可探索的空间还很大,获得一个好的idea,写出一篇好论文的概率相对就大得多。

很多童鞋的终极目标是拿着论文当敲门砖,去某某大厂开启人生新篇章。

那么剩下的问题就是,怎么发(水)论文?

想要快速发论文有两点至关重要。

1.紧跟风口。

想发文章最容易的方法就是紧跟风口,顺着领域内的研究趋势确定自己的方向,毕竟在热门领域内,创新点和idea远比其他非热门领域多。

2.有一位有经验有能力的前辈指导。

大家都在努力的设计新网络、新策略、新training算法,只要能够在某一问题上做到一个很好的performance,论文就水到渠成。而想要快速达到,来自前辈的指点不可或缺。

所以,要解决的问题就是:

1.找到风口。

2.找到领域内的大神做导师。


扫码免费听课

1025日大神带你一节课掌握预训练模型

获取容易发论文的创新点

文末免费领超20G资料、课程福利

创新点和idea不可能凭空生成,好的performance 也绝不可能一蹴而就。

10月25日,沃恩智慧邀请在人工智能领域已颇有建树的Joy老师,带大家精读三篇预训练模型最新前沿论文,全方位解读预训练发展应用、可创新方向



直播课亮点
01

亮点一:领读人和论文精挑细选

由在人工智能领域耕耘多年的科研大神带你精读最新顶会论文,作为有多篇顶会论文在手的科研大神,可充分把握人工智能发展的风向标。

02

亮点二:算法与论文齐头并进

Wendy老师将逐句分析论文中各段落、语句之间的关系,算法创新模型与科研论文创作技巧并学,以深厚的顶会、顶刊英文论文写作功力和深耕多年的科研经验带领大家层层闯关。

03

亮点三:全方位剖析,拒绝泛泛而读

针对论文,老师除了最基本的算法模型讲解外,更将从论文第一作者的角度深入剖析论文价值,并讲解论文泛读/精读的方法策略、写作方法策略、复现思路、代码分析……

扫码免费听课

1025日大神带你一节课掌握预训练模型

获取容易发论文的创新点

文末免费领超20G资料、课程福利







带读论文题目

(1) prefix-tuning: prefix-tuning optimizing continuous prompts for generation (ACL2021)

(2)adpaters-tuning: Parameter-Efficient Transfer Learning for NLP (NIPS2019)

(3)Mix-and-Match adapters:  Towards a unified view of parameter-efficient transfer learning (ICLR2021)



课程福利:




作为日常为了论文而忙碌的科研人,小编知道大家一定很需要一些资料。因此,小编精心整理了一份超过20G的AI顶会论文大礼包!包含最新顶会论文、书籍等资料,以及引文论文写作指导保姆级资料,从文献阅读到论文写作全部帮你整理好~

原价999

扫描二维码即可0元领取!

扫码领资料↑

此外~小编独家放送最新前沿论文带读课程添加老师微信即可免费领取课程讲师均为顶会顶刊论文作者,更身兼顶会顶刊审稿人,带你剖析顶会论文,寻找可能的创新点~

论文带读囊括CV、NLP、机器学习多个方向,总有一款适合你!

扫码添加老师微信即可免费领↑

课程目录(持续更新中)↓

来看看这份资料饕餮大餐都有什么

1.【2022最新AI论文与书籍】(持续更新中)8G

2.NLP、深度学习必读论文及资料合集



3.【SCI论文写作保姆级指导资料】13G

4.大神带你精读前沿论文

扫码添加老师微信即可免费领课程↑

-END-



微信扫码关注该文公众号作者

戳这里提交新闻线索和高质量文章给我们。
相关阅读
博士申请 | 美国北卡州立大学胥栋宽老师招收深度学习方向全奖博士/硕士/博后安全人必备书《Web安全攻防从入门到精通》正式预售世界首富被海外版Dǒu 音Tik Tok逼哭?!2022年保姆级教程来了:0基础小白从入门到精通!许东的「AI生命科学」进化史:从90年代泡沫繁荣,到深度学习复兴侯门深似海:仕春秋(111-114章)使用魔搭开发自己的语音AI:从入门到精通开拓者村庄:前世和今生冲上 App Store 工具榜第一的微信键盘,你用了吗?深度学习三巨头邀你来参会!赢取RTX 3090!NVIDIA GTC 2022 AI 大会来了!有了深度学习的加入,生成代码变得更智能、更高效了深度学习如何在课堂中真实发生?从这五件事做起导师放养,深度学习顶会论文投稿策略7步走!深度解读 | 机器学习和深度学习的区别到底是什么?通过深度学习将 L1000 图谱转换为类似 RNA 的图谱华东师范大学教授钟启泉:撬动课堂转型的深度学习如何发生?Rhino参数化,真的让我从入门到放弃!K8s 零基础从入门到精通露营飞盘徒步陆冲,从入门到放弃上科大团队开发了一种面向未来光学AI的节能、轻量级、深度学习算法一种产生DSN放大攻击的深度学习技术三高患者推拿按摩注意事项神了,那些发顶会顶刊的idea都是从何而来?冲上 App Store 工具榜第 1 的微信键盘,你用了吗?港科大提出:深度学习在全景视觉上的综述MLNLP前沿综述分享第一期 | 美国Pinterest公司@吴凌飞:面向自然语言处理的图深度学习从手工作业到工业革命!Nature文章:生物图像分析被深度学习彻底改变的五个领域南洋理工计算机视觉科研项目招生(仅限机器学习,深度学习,AI,迁移学习方向)常做的几款时令沙拉和凉拌菜/二者有区别吗?积木式深度学习的正确玩法!新加坡国立大学发布全新迁移学习范式DeRy,把知识迁移玩成活字印刷|NeurIPS 2022自然语言处理 · 机器学习 · 深度学习《部队大院的八零后》第六章 这家没法呆了那些发顶会顶刊的idea都是怎么来的?发布 | 2022年中国深度学习年会宣传片中国女排戴口罩比赛,有什么寓意?清华钱班学生两度转行,从入门到一作发Science只用2年,明年回国做PI
logo
联系我们隐私协议©2024 redian.news
Redian新闻
Redian.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Redian.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。