您现在的位置:主页 > 新闻动态 >

leyu乐鱼体育官网_发顶会论文,怎么就那么难?

时期:2021-11-18 00:29 点击数:
本文摘要:随着 AI 领域越来越火热,各大顶会的论文公布似乎也越来越难:AAAI 2020 放榜,8800 篇提交论文创历史记载;CVPR 2020 被称为十年来最难投中的一届;IJCAI 2020 审稿堪称史上最严,创下了史上最低的吸收率 12.6%;OSDI 2020 任命率不足18%;NeurIPS 2020 论文投稿数量创历史最高,但吸收率却为史上最低……在这种情况下,难免有人叹息:“发顶会论文,怎么就那么难?

乐鱼体育官网登录

随着 AI 领域越来越火热,各大顶会的论文公布似乎也越来越难:AAAI 2020 放榜,8800 篇提交论文创历史记载;CVPR 2020 被称为十年来最难投中的一届;IJCAI 2020 审稿堪称史上最严,创下了史上最低的吸收率 12.6%;OSDI 2020 任命率不足18%;NeurIPS 2020 论文投稿数量创历史最高,但吸收率却为史上最低……在这种情况下,难免有人叹息:“发顶会论文,怎么就那么难?”为此,我们特地收集了10个与如何“收割”顶会论文相关的问题,采访了三位来自微软亚洲研究院差别研究领域的研究员,他们都曾担任过差别顶会的领域主席。在圣诞节来临之际,希望前辈们的建议,能作为一份特此外礼物,资助大家在科研门路上越走越远!陈薇陈薇博士,微软亚洲研究院机械学习组高级研究员,主要研究机械学习各个分支的理论解释和算法革新,现在的研究兴趣包罗深度学习理论、深度强化学习、差异隐私、因果关系和博弈论等。

陈薇曾担任 NeurIPS、ICLR 等集会法式委员会委员,并将担任 IJCAI 2021 机械学习偏向的领域主席。杨蛟龙杨蛟龙博士,微软亚洲研究院视觉盘算组主管研究员,研究偏向为三维盘算机视觉、人脸建模与分析。

杨蛟龙恒久担任盘算机视觉顶级集会与期刊 CVPR、ICCV、ECCV、TPAMI、IJCV 的审稿人,并将担任 CVPR 2021 和 ICCV 2021 的领域主席。张星星张星星博士,微软亚洲研究院自然语言盘算组主管研究员,现在研究兴趣集中在文本摘要及生成和预训练模型。

张星星恒久担任 ACL、EMNLP、NAACL 法式委员会委员,并将担任 ACL 2021 摘要偏向的领域主席。Q1:论文的 idea 泉源有哪些?如何可以想到不错的 idea?一个 idea(想法)是一个做科研的开始。在提到 idea 的泉源时,三位研究员都不约而同地提到了读论文这个方法。

想要输出好的内容,首先要有输入。杨蛟龙提到,关于 idea 最主要的渠道泉源还是读论文,在读现有论文的历程中发生想法,好比发现现有某一个或一类方法的不足并思考解决方案、受某个现有技术的启发去解决另外一个新问题等。这也与张星星的看法不约而同,张星星表现,一个好的 idea 是要解决前人没有解决的问题,或者革新之前方法当中的某些缺陷,这些都是一些比力好的出发点。除此之外,良好的相同也是必不行少的。

在日常和同事、同学、导师的头脑风暴中,讨论需要关注的领域和问题,相互借鉴方法,更容易迸发出灵感的火花。在这里,陈薇勉励研究者们在到场顶会或学术大会时,多去听一听自己感兴趣的 Workshop。往往这些 Workshop 中会有许多行业内前瞻性的探索,也会有许多活跃的业内人士,在这样的情况下,更容易发生好的 idea。学科交织迁移也是一个可以实验的方法。

作为数学配景身世的研究者,陈薇会把盘算机领域的问题放在数学的知识框架下举行思考,从而探索新的问题或者解法。在盘算机科学领域,也可以从最基本的观点和方法论去寻找灵感。

Q2:有没有一些好的/常用的论文写作技巧可以分享一下?有时候,有些同学可能还没有接受足够的论文写作训练,所以容易依赖导师。可是,论文写作是科研的一个关键环节,尤其对于想独立做研究的学生来说,优秀的论文写作能力是不行或缺的。

三位研究员们提出了许多可以借鉴的论文写作技巧。第一,把自己放在读者的位置上。

人们经常会在面临自己写的内容时,自我感受良好,但如果换做一个对论文内容比力生疏的人来阅读,读者是否真正能领会到研究的要点,论文逻辑是不是顺畅,文章里的生疏词汇是不是许多…… 这些都是要从第三方的角度思考的。因此,在论文写作时应该多换位思考、从读者的角度去组织和修改文章内容,论文完成后还可以邀请同学、老师或者朋侪帮助通读论文,看看另有哪些读者疑惑的问题。第二,写论文要有讲故事的思维。

其实,做科研就是一个讲故事的历程,写论文也是。论文写作需要一个完整的故事逻辑,好比,从论文为什么要做领域内的这个问题出发,讲述现有算法为什么不能很好地解决这个问题,然后我们有什么新的发现或认识,基于此提出了一个什么样的方法,这个方法创新在哪,最后的效果又是怎么样的。

论文一定要有一条很流通的逻辑线,不要写成一个枯燥无味的技术陈诉。第三,在阅读论文的历程中积累技巧。当你阅读其他作者的论文时,如果发现论文中有精彩的部门,好比优美且专业的用词、流通的逻辑表达、漂亮的图表等等,都可以记载下来或者截图生存,建设供自己重复学习以及论文写作时参考的“语料库”。

第四,论文写作要精练、严谨、清晰。研究员们表现,在做 Reviewer(审稿人)时,他们经常会看到有的论文在论述孝敬时,会泛起用力过猛的情况。因此,三位研究员都强调了,论文写作的语言要精练,突出重点。因为 Reviewer 的审稿时间是很是有限的,不行能把过多的时间浪费在一篇内容不清楚的事情上。

同时,用语也要严谨。好比,在用形容词形貌效果水平时,到底是 superb,还是 good,抑或 descent, reasonable 等,每个单词都要有掌握,字斟句酌。这是因为,大部门人在读论文时都是抱着怀疑的态度,如果细节不严谨,可能会引起对该研究事情的不信任。

最后,论文写作不是一蹴而就的,需要投入大量的努力。三位研究员都表现,做研究和写论文都是没有捷径可走的。

与其投机取巧,不如在研究一开始就踏踏实实,严格把关每个环节,尽早把实验酿成文档,形成严谨的逻辑链条。杨蛟龙表现,对于刚起步的同学,写论文可以先搭建框架再富厚内容,由粗到精地写。

好比,凭据整体逻辑先确定每个章节的标题,再确定每个子章节及其标题,然后可以写章节中每个段落的第一句话(尤其是引言部门),最后再把所有段落内容写好。Q3:如何做好投稿前的时间治理?在科研中,做计划是件很难的事,因为研究历程中有太多变数。但纵然计划很难,也还是要做。凭据自己在 CV 领域顶会的履历,杨蛟龙认为在投稿3个月前,大家就需要紧张起来了。

紧张起来并不是说要天天加班到破晓,而是要做计划,凭据项目现在的情况,列失事情的优先级。如果在一定时间内做不完,就不要再钻牛角尖连续拖下去了,实验换一个偏向。

因为,如果没有这样的全局观,会很容易陷入“坑”里,自己总以为另有时间,但最后可能会发现就算解决了这个“坑”,用处也没有那么大,时间没用在刀刃上。对此,张星星总结了一套实用的方法——提前写一部门论文。一篇文章不需要等实验的所有部门都完成了才开始写,有许多部门其实是可以提前举行的,好比 related work(相关事情)部门。在方法部门,如果做实验已经看到方法有希望,那么可以先把方法写出来,利便梳理,也更容易“抠”细节、反思流程、发生灵感。

最好论文的第一版可以提前一个月的时间完成并递交给导师,这样导师有足够的时间,也会给出实时的反馈。固然,研究也需要良好的执行能力。陈薇提出,研究是一个完整的事情流程,每个环节都需要严谨。

如果在选题、实验等各个环节中有所疏漏,那么整篇论文都不会扎实。提早发现问题,高尺度严要求解决掉问题,会大大降低论文写作的难度。Q4:论文评审中,审稿人更希望看到什么样的论文呢?一篇好的论文,内容要正确清晰,逻辑顺畅,真的有孝敬,效果也要充实、有说服力。

但对于不少海内的研究者来说,首先要过的就是语言关。张星星在审稿时就曾遇到过这样的事情:作为审稿人,他看懂了一篇论文,然而其他评审者却看不懂,给了很低的分数。其原因在于,张星星作为中国人,十分相识中国学者的用词习惯,所以他可以看懂这篇文章想要表达的看法,也看出来了这篇论文是中国研究者写的。

然而,只管他对文章的学术内容表现认可,并试图挽救这篇论文,但最后还是失败了。最终领域主席认为,论文的语言不切合 ACL 尺度,文章不能被接受。除了语言外,内容也是一概略点。

leyu乐鱼体育官网

杨蛟龙认为,一篇论文的内容在各个方面只管都不要有短板。如木桶原理一样,论文中如果有短板,纵然此外地方突出,评审者都不得不将评分降到较低的区间。因此,无论是在写作上,还是在讲故事、方法的创新性、实验的完整度上,论文都应该做到全方位没有“死角”。

在没有短板的基础上,论文如果有亮点,好比方法很是新颖,实验特别充实等,都市受到好评。正如杨蛟龙所说:“如果能把论文的每个部门都做成亮点的话,那真的太优秀了。”不外,纵然做不到整篇论文都是满分,那么把一个点做到极致,也会让人印象深刻。固然,评审者也会有自己的喜好,张星星和陈薇都不约而同地提到了富有解释性的文章。

许多文章的逻辑都是提出模型-模型优势-实验效果提高,可是如果能解释清楚实验效果数据为什么会这么好,多一些深入的分析,就更能靠近问题的本质。Q5:Rebuttal 的用处在那里?如何写好 Rebuttal?Rebuttal(反驳)是论文评审中关键的一步。

张星星表现,其实我们天天都在 Rebuttal。无论是和导师,还是和同事/同学,只要在一起讨论论文和问题,都是 Rebuttal 的历程。他自己曾经有三次通过 Rebuttal 让文章被改分的履历。“Rebuttal是有可能拯救一篇文章的,所以千万不要放弃 Rebuttal 这个时机。

”对此,杨蛟龙也有切身体会。他回忆道,在一次投稿时,因为一个公式没有写清楚,而导致论文被几位审稿人否认,但在他通过 Rebuttal 环节详细解释后,文章最终获得了认可,评分也迅速上升,最终论文被吸收。研究员们表现,通读完论文的评审意见之后,可以先将提出的问题列出来,仔细思考为什么会有这些问题。大部门审稿人提出的意见背后都是有原因的,所以要从论文出发,追念有问题的部门,反思一下是不是确实容易发生误解,然后再去写 Rebuttal。

同时,看待 Rebuttal 的态度要规矩,没有须要太过情绪化。Rebuttal 不是一个反抗的历程,事实上,审稿人是资助者而不是敌人。

陈薇认为,Rebuttal 其实是一个让文章可以变得更好的历程,在与同行的讨论中,我们也加深了对事情的明白。另外,在 Rebuttal 写作时也需要有一定的逻辑性,针对问题举行解释要层层递进。如果要求实验效果,那么就只管去举行实验,因为图表数据更有说服力。其实,如果认真、真诚地回复 Rebuttal,既能显示出研究者对事情卖力任的态度,也是对评审者辛苦审稿的尊重。

Q6:要如何和导师举行相同互动?在相同历程中,首先要保持一个坦诚的态度。三位研究员都表现,同学们要不怕犯错,千万不要有了想法后不说出来,自己闷头“蛮干”。陈薇认为,做研究时思维方式要调整,导师是同学们的互助者,实时和导师相同,可以制止走许多弯路,节约更多科研时间。从整个科研项目的治理上来说,让导师知道每个细节也是很有须要的。

究竟在快到 Deadline 时,如果学生有许多的话,导师也两全乏术,没有措施将许多时间分配给每个学生。在写论文的角度上,杨蛟龙提出,刚接触科研的同学可以提前跟导师相同,询问应该怎样讲一个故事,在导师提点之后,同学们就可以凭据导师讲的思维开始起草论文了。如果是高年级的同学,则可以只管去跟导师讨论自己的论文思路,等文章写完后再让导师提一些反馈意见。

Q7:随着 AI 领域越来越火,顶会投稿量也不停增多(好比 CVPR 2020),顶会录取会不会更难?在杨蛟龙看来,只管整个 AI 领域的科研人员比原来增加了不少,但无论是从论文的录取率,还是投稿的难易水平等多个方面,他小我私家以为和之前没有太大区别。发论文其实并没有那么难,难的是怎么出类拔萃。他表现,现在泛起了许多快餐式的论文,只管这种论文的内容似乎也能说得已往,但其实对领域的研究生长资助并不大。

如果想要成为一名优秀的研究人员,那么在刚开始做科研时,就要建设起良好的科研品味,好比要做对领域有重要孝敬的事情,希望让更多人从中受益,或者对领域有所改变。如果从一开始做科研的时候就给自己树立这样的尺度和价值观,那么你以后的论文将会是更有价值的存在,是能让人去引用的论文,那就是出类拔萃的。杨蛟龙勉励每位同学都给自己设立一个小目的,好比做口头陈诉论文,做前10%、5%、3%的论文等等,以此来激励自己做有价值的科研。

Q8:ACL、EMNLP、IJCAI、AAAI 都市有 NLP 偏向的论文,对于 NLP 的事情,集会倾向的气势派头会有什么差别吗?如果有的话,投稿时需要注意什么?张星星提到,差别集会的气势派头确实存在区别。像 ACL、EMNLP 都是比力传统的 NLP 集会,可能更偏重相对传统一些的 NLP 领域问题。

像 IJCAI 的话,内容就会更多样化一些,不仅有 NLP 的问题,可能另有盘算机视觉、机械学习等多种 AI 相关的偏向。如果是把 NLP 应用到了一个产物,或者一个比力新的领域中,那么 IJCAI 这类集会会相对比力喜欢这样的论文。如果是比力传统的 NLP 问题,那么把这样的论文投到更相关的集会上,则会受到更多的关注度。

事实上,有履历的科研人员有时只需看论文的主题,就大致有一个感受,以为这篇文章更适合哪一类的集会,所以同学们可以多跟导师举行交流。Q9:机械学习偏向的三大 AI 顶会:NeurIPS、ICML、ICLR 划分有什么特点?怎样做到针对性投稿?对于这个问题,陈薇从顶会的历史说起,给出相识答。NeurIPS 是 Neural Information Processing Systems 的简称,在神经网络模型2012年再度兴起之前,这个名字听上去与机械学习并不十分匹配。但其实,NeurIPS 恒久被机械学习等领域的学者所青睐并保持繁荣,其很大原因在于它比力开放、包容新兴问题和创新方法。

这从 NeurIPS 一直以来努力保持的 Single track + Poster 的集会形式也有所体现,勉励学者在自由讨论中举行思维碰撞。所以,比力新颖的、脑洞大开的想法可以实验投稿 NeurIPS。相对 NeurIPS,ICML 是一个越发传统的机械学习集会,吸收机械学习各个领域的前沿事情,较偏好理论、算法、实验比力平衡和完整的事情。

ICLR 则是比力新的集会,建立于2013年深度学习兴起之时,勉励从表达学习的视角明白深度学习,同时展现深度学习的各项前沿应用,好比盘算机视觉、盘算生物学、语音识别、文本明白、游戏和机械人等。另外,ICLR 首先接纳了公然评议(Open Review)的审稿方式,评审意见公然,审稿人、作者、民众的讨论越发充实,学者在投稿或者关注中有更大收获,同时也促进了 ICLR 的快速发展。

leyu乐鱼体育

Q10:日常应该从哪些方面磨炼自己的科研能力?杨蛟龙认为,科研能力包罗许多方面,从最开始的学会读论文,到开始写论文做演讲,固然另有编码能力、思维能力等等,要求是全方位的,一个及格的研究员不应该有短板。而在这其中,最重要的是逻辑思维能力和问题分析能力。分析问题的时候,如果遇到一个问题,要怎么解决这个问题?如果这个问题乐成解决了,接下来又有什么问题?这种树状的逻辑思维能力和分析能力需要长时间打磨、造就,才气建设起来。

有了问题分析息争决的能力,才气在问题中快速发现关键点,也能在问题中获得灵感。在张星星看来,科研能力和研究品味是需要逐步提高的。好的输出必须有好的输入做基础,一方面要读大量的论文积累,另一方面就是要多做实验,在实验中看到方法的缺陷和问题。

除此之外,去到场顶会也很重要。在开会时,可以和领域内的“大佬”多交流相同,相识他们的看法,向他们提问,从而举行思维碰撞,提高自身能力。陈薇则提出,同学们在举行科研时,最重要的一个前提是已经完成了一套完整的科研训练。

亲身体会过完整的科研流程、造就良好的研究习惯后,才会对自己的研究有合理的预期,循序渐进地追求想法和深度。同时,科研中的心态十分重要。制止眼妙手低,在科研开始阶段一昧追求做“大事”,也不要在已经完成科研训练之后低估自己,受限于舒适圈内而不敢斗胆实验。

建议短期内在自己的兴趣、能力和事情的影响力三者之间做最优匹配,恒久保持学习习惯、好奇心和挑战自我的勇气。通过与研究员们的相同,我们可以看到,科研是一个恒久的历程,不仅需要技巧,更需要良好的心态。

与其临渊羡鱼,不如退而结网,终有一天你也会成为别人眼中的“顶会大佬”!最后,圣诞老人祝大家在以后的研究事情中论文全过,顶会全中!。


本文关键词:leyu乐鱼体育,leyu,乐鱼,体育,官网,发顶,会,论文,怎么,就

本文来源:乐鱼体育官网登录-www.hamidsardar.com



Copyright © 2005-2021 www.hamidsardar.com. 乐鱼体育官网登录科技 版权所有 备案号:ICP备93124264号-7