编码机

如何在顶级人工智能会议上发表文章

发布时间:2024/10/14 12:03:24   

关于IJCAI,它是人工智能领域最古老的会议之一(自年以来)。核心排名将其列为AI会议。谷歌学术排名将其列为十大人工智能会议之一。与任何其他著名的AI(人工智能)、ML(机器学习)和DM(数据挖掘)会议一样,其接受率也很低。

在下面分享在AI会议上实现这一目标的方法。

秘诀一:把自己放在正确的位置

这个标题的意思是你最好加入一个team。你周围的环境,你周围雄心勃勃的人的周围,将为实现这一目标创造合适的基础。您仍然会做最重要的工作(作为第一作者),但他们的指导和陪伴将会产生很大的影响。这已经给你带来了50%的优势。

如果您已经通过适当的规划和研究到达了这样的地方,那么恭喜您!如果你最终到达了一个没有在顶级场所发表过记录的地方,那么你的成功将会有些困难,所以请注意以下提示。

技巧2:吴恩达(AndrewNg)提出的万无一失的方法

这是提出原创想法的热门技巧。几年前,我在Quora上偶然发现了这样一个问题:“如何在NIPS、ICML、AAAI、IJCAI上发表论文?我不知道如何获得新颖的想法。”

GaneshJawahar对这个问题的最佳答案提到了AndrewNg在机器学习领域建立职业生涯并成为一名伟大研究人员的方法。我认为安德鲁的方法是撰写优秀研究论文的万无一失的方法。这是视频的链接,这是他的方法的摘要:

阅读:阅读您所在领域的大量研究论文。

重现:尝试重现这些论文的结果。

自己做肮脏的工作:在进行自己的研究或尝试重现别人的方法时,您会遇到这些事情。诸如数据清理、修复一些依赖性问题、从源代码安装库、破解GPU内核等。

安德鲁认为,如果一个人循环执行这些步骤,就会想出新的想法来推动最先进的技术。据他介绍,这个过程可靠地将非机器学习研究人员转变为非常优秀的机器学习研究人员。

我觉得这是迄今为止获得优秀博士学位的最常见方式。学生参加顶级会议。许多优秀的研究论文往往是由其他研究论文的某种组合激发的。

技巧3:不要低估了Kaggle

大约在年初,在我的硕士课程期间,我开始了解Kaggle的数据科学竞赛。在机器学习课程中,我听到一些学生谈论Kaggle被Google收购。那天晚上,我研究了Kaggle,得出的结论是:“哦,基本上是一个他们只是争夺0.1%收益的平台。”这是一个非常天真的和自私的结论,我确实花了几年时间才理解一项真正有用的技能的重要性,我将其命名为“kaggling”。

我并不是说要在顶级场所发表,就必须先参加Kaggle。我是说你的这项kaggling技巧一定非常高效。问题是,一旦你有了一些想法并且正在实施它,你将不得不处理这些问题:

如何处理模型的多个版本(当然,您会修改模型)?

如何处理数据集的多个版本(很可能,您将创建玩具数据集或设计现有数据集)?

如何有效地调整超参数?

如何有效地进行基准测试和验证?

老实说,在实现我的想法的同时,我还观看了几段Kaggle获奖者的采访,以了解他们的工作流程。特别是,我真的很喜欢AnjumSayed(CommonLit独奏第四名)的采访。从他的采访中,有两件事引起了我的共鸣:

一次改变一件事。

尝试在最短的时间内测试多个想法。

技巧4:扩大你的数学范围

与陶哲轩这样的纯数学家相比,人工智能所做的数学仍然很浅薄。我记得在我去年参加的一所暑期学校中,一位碰巧从事深度学习理论工作的著名机器学习研究科学家说了这样的话:“……我从事深度学习理论工作,尽管我所处理的理论类型是可笑的与数学家相比。”

我假设您已经了解线性代数、微积分和概率。但如果你有更广泛的数学知识,它可以帮助你开发一些新颖的想法(例如混合模型、经典方法+神经网络)。一些扩大您的范围的推荐领域是:

微分方程。

信号处理。

优化。

几何学。

测量和概率。

泛函分析。

此外,熟悉数学的纯理论书籍也是一项很棒的技能。它可以帮助您为您的工作带来更多数学严谨性(例如,当您必须证明存在性和唯一性或在论文中创建命题时)。

说实话,我觉得要做一些真正有影响力的事情,只需要线性代数、微积分、概率的基础知识就可以了。真正对这个世界产生影响(具有一些实际效用)的研究并不是数学上那么密集。此外,有时你的想法在数学上非常简单,但它们对ML社区产生巨大影响(例如dropout和批量归一化)。

我觉得这个特别的建议并不是每个人都喜欢。请不要灰心;我建议坚持吴恩达(AndrewNg)提出新颖想法并尝试撰写应用论文的方法(在技巧6中简要提及)。

秘诀5:提升你的学术写作水平

这是必备技能!在写文章之前,我对如何写一篇好的科学论文进行了广泛的研究。我记下笔记并浏览了流行的MOOC和Youtube上所有关于学术写作的著名讲座。我将在这里推荐其中的一些。

微软研究:西蒙·佩顿(SimonPeyton)精彩的一小时讲座!他说得很好:“……用你的想法感染读者的思想,就像病毒一样。”他强调在引言中明确贡献。他将RW(相关工作)部分放在最后的观点引起了我的共鸣。他认为,将RW放在开头可能会成为你的想法和审稿人之间的障碍。审稿人需要尽快掌握你的概念。

Edx,慕尼黑工业大学:天啊,JeremiahHendren的2.5个步骤的策略确实是克服作家障碍的好方法(Unit2)。他认为,人们应该将倾倒自己的想法、使句子连贯和语法纠正的过程分开。此外,关于标点符号的讲座清晰简洁。

Coursera,斯坦福大学:绝对不要错过第1单元(消除混乱)和第2单元(主动动词)中的讲座。他们教授修剪凌乱段落的艺术以及如何用非常简单的句子表达你的观点(例如使用动词,避免名词,以及更喜欢主动语态而不是被动语态)。Unit5关于如何写论文的内容值得检查。因此,在写文章之前,请将精心打磨的图表放在文章中。这将帮助您写一个与所获得的结果相一致的故事。

查看其他优秀的研究论文:查看您所在领域已被顶级会议接受的高质量研究论文。了解他们的章节和小节的结构以及他们如何构思故事情节。我相信这是优秀博士最常用的方法。学生创作出高质量的文章。

我做了更多的研究,不仅仅是这些,所有这些实际上都帮助我写了一篇好文章。这绝对值得单独写一篇文章。根据这篇文章的反响,我可能会考虑写一篇关于学术写作的详尽文章。

学会完善你的介绍。这是因为一些AI会议分两个阶段举行。第1阶段是总结拒绝阶段,因此您肯定需要在介绍部分进行额外的工作。

提示6:其他

我对这些策略没有直接经验,但我见过人们通过这些策略在顶级会议上取得成功。

与某人合作

最好是来自您实验室的某个人(您的同事,您在会议、研讨会或聚会期间亲自见过的人)与您一样雄心勃勃,致力于实现这一目标。如今,拥有共同的第一作者身份也很常见。确保另一个人和你一样投入;否则,您将不会有良好的体验。

失败,然后成功

通常,当您的论文被AI会议拒绝时,您会收到一些很好的反馈。将这些反馈纳入您的工作中,以增强您的文章,然后再将其提交到下一次A*会议。上次A*会议(您的论文被拒绝)的同一审稿人也有可能在未来的地点审阅您的论文。看到你的文章有所改进,他们这次可能会给出更好的评论。

你不相信我这会发生吗?查看Andreas的鼓舞人心的帖子,其中提到了他们论文中发生的这种情况。此外,您可以通过在与AI会议同时举行的研讨会上展示您的工作来获得更全面的反馈,并且更容易被接受。

运气很重要

运气很重要!仅仅改变审稿人就会导致所选论文出现50%的变化。我认为,在立志做大事之前,需要全心全意地接受你也许只有不到一半的成功率的事实。

结论

上面列出所有实现这一目标所需的所有重要信息。我知道这不是一条容易的路。每个技巧都不是魔法,需要您付出相当大的努力。一旦您有了基于技巧2和技巧4的概念验证(可行的想法),大约需要3个月的时间才能写出一篇成熟的文章。

必须承认,如果你独自一人,这是一项压力非常大的工作。从提出数学想法到撰写论文、编码和基准测试,您将必须做所有事情。所以我的建议是找到一个像你一样投入的人,然后把自己放在正确的位置上。



转载请注明:http://www.aideyishus.com/lkgx/7106.html
------分隔线----------------------------