【新智元导读】人工智能顶级会议 ICML 2019 发布了今年论文录取结果。提交的 3424 篇论文中,录取了 774 篇,录取率为 22.6%,较去年有所降低。从录取论文数量来看,谷歌成为今年最大赢家,紧随其后的是 MIT 和伯克利。

  ICML 2019 论文录取结果出炉,你中了吗?

  一时间,网友们可高兴坏了,纷纷晒帖表示“我中了!我中了!”

ICML 2019论文录取Top100:谷歌霸榜-冯金伟博客园

  据了解,今年 ICML 共提交 3424 篇论文,其中录取 774 篇,论文录取率为 22.6%。录取率较去年 ICML 2018 的 25% 有所降低。

ICML 2019论文录取Top100:谷歌霸榜-冯金伟博客园

  目前,所有录取论文已经在官方网站公布,若有投稿的读者,可自行前往下方链接查看论文是否被录取:

  https://icml.cc/Conferences/2019/AcceptedPapersInitial?fbclid=IwAR0zqRJfPz2UP7dCbZ8Jcy7MrsedhasX13ueqkKl934EsksuSj3J2QrrRAQ

  谷歌成为最大赢家,MIT、伯克利紧随其后

  Reddit 网友发表了他和他的公司对本次 ICML 2019 论文录取情况的统计结果。

ICML 2019论文录取Top100:谷歌霸榜-冯金伟博客园

  地址:

https://www.reddit.com/r/MachineLearning/comments/bn82ze/n_icml_2019_accepted_paper_stats/

  今年,在所有录取的论文中,谷歌无疑成为了最大赢家。

ICML 2019论文录取Top100:谷歌霸榜-冯金伟博客园

录取论文总数排名(按研究所)

  上表显示了以研究所(包括产业界和学术界)为单位,录取论文总数的排名。这项统计中至少有一位作者隶属于某研究所,因此一篇论文可以出现多次且隶属多个研究所。

  排名地址:

  https://i.redd.it/wdbw91yheix21.png

  其中,蓝色代表论文总数,绿色和红色分别代表第一作者和通讯作者参与录取论文的论文数量。并且,附属机构是手动合并到研究所的,例如 Google Inc.、Google AI、Google UK 都将映射到 Google。

  可以看到谷歌录取论文的数量远超其它研究所,位列第一;紧随其后的是 MIT、伯克利、谷歌大脑、斯坦福、卡内基梅隆以及微软。

  作者还分别根据学界和产业界进行了统计 Top 50 排名。

ICML 2019论文录取Top100:谷歌霸榜-冯金伟博客园

  排名统计可视化地址:

  https://i.redd.it/37hxhsmfzix21.png

  在学界排名中,MIT、加州伯克利分校、斯坦福和卡内基梅隆夺冠前四,成为本届录取论文数的第一梯队,且与第二梯队拉开了一定差距。

ICML 2019论文录取Top100:谷歌霸榜-冯金伟博客园

  排名可视化地址:

  https://i.redd.it/wa6kjzmhzix21.png

  在企业研究所 Top 50 排名中,谷歌无疑成为最大赢家:谷歌、谷歌大脑和谷歌 DeepMind 分别取得第一、第二和第四的好成绩。微软、Facebook 和 IBM 成绩也较优异,位居第三、第五和第六。

  而对于国内企业,腾讯(Tencent)成绩较好,位居第八名。

  此外,从本届 ICML 2019 录取论文情况来看,还可以得到如下统计:

  • 452 篇论文(58.4%)纯属学术研究;

  • 60 篇论文(7.8%)来自工业研究机构;

  • 262 篇论文(33.9%)作者隶属于学术界和工业界。

  总结上述的统计,我们可以得到如下结果:

  • 77% 的贡献来自学术界;

  • 23% 的贡献来自产业界。

  伯克利两位研究人员分别被录取 7 篇和 6 篇论文!

  根据今年录取论文情况,还得出了基于论文作者的排名统计情况。

ICML 2019论文录取Top100:谷歌霸榜-冯金伟博客园

  排名地址:

  https://i.redd.it/r2drkqkkeix21.png

  上图中根据论文唯一作者(黄色)、第一作者(橙色)、通讯作者(绿色)及论文总数(蓝色)进行了统计。

  来自加州大学伯克利分校的Michael Jordan被 ICML 2019 录取了7 篇论文,成绩是相当的惊人!紧随其后的是Volkan Cevher (EPFL)Sergey Levine (加州大学伯克利分校),各被录取6 篇

  同样令人印象深刻的是,大量的研究人员拥有两篇或两篇以上的唯一作者或第一作者论文。这一排名中,来自谷歌的 Ashok Cutkosky 遥遥领先,他有一篇唯一作者论文、一篇第一作者论文和一篇普通作者论文。

  Simon Du (CMU)和 Jayadev Archarya (Cornell)的结果也是较为瞩目的,他们分别发表了三篇第一作者论文。

ICML 2019论文录取Top100:谷歌霸榜-冯金伟博客园

  排名地址:

  https://i.redd.it/1mo7is3meix21.png

  根据通讯作者的排名,或许我们可以从中发现更多的资深人士。

  相对贡献排名

  最后这项排名是根据相对贡献来排名的,即一篇论文中有多少作者实际上来自某个研究所。

ICML 2019论文录取Top100:谷歌霸榜-冯金伟博客园

  排名地址:

  https://i.redd.it/o1783e2oeix21.png

  ICML 2019 如何评审论文?

  新智元此前做了 ICML 2019 评审结果一出,便遭到了众网友讽刺的相关报道。我们先来看下 ICML 2019 的论文评审机制:

  1、双盲评审

  ICML 2019 论文评议采用双盲模式; 即审稿人不知道作者的身份,作者也不知道审稿人身份。请尽可能以第三人称的方式引用自己之前的成果,请不要在提交的论文中添加致谢、以及公共 github 存储库链接。如果需要匿名引用,比如参考自己在其他地方正在评议中的成果,请将此成果作为补充材料上传。匿名是强制性要求,明确或隐含地揭示作者身份的论文可能会被拒稿。审稿人可以通过外部资源来推断出作者的身份,比如在网上发布的技术报告。这一点并不违反双盲审稿政策。

  2、关于补充材料

  本届 ICML 大会支持提交两种补充材料 – 补充论文和代码/数据,这些补充内容可用于提供额外证据支持。如果作者在论文中进行匿名引用,请务必上传参考文献,以便审稿人可以快速查看。请注意不要在补充材料中透露作者的身份。

  关于代码提交,我们希望作者能够合理地以匿名形式提交代码和所在机构。即删除作者姓名和许可信息。ICML 2019 允许通过匿名 github 存储库提交代码。但是,这些代码必须位于在提交截止日期后不可修改的目录中。请在提交的 zip 文件中的独立文本文件中输入 github 链接。

  请注意,提交的论文必须完全独立。大会提倡审稿人查看作者提交的补充材料,但审稿人并没有此义务,我们也不希望给审稿人带来不必要的负担。作者不得利用辅助材料来延长论文长度。如果作者认为该材料对评估论文至关重要,则需要将其包含在论文中。补充材料可以 zip 文件或 pdf 格式提交。

  补充材料不公布、不存档。如果要将其包含在论文的最终版本中,则必须将材料放在网站上,并在论文的最终版本中引用该网站。

  审稿人匹配

  为了找到适合作者提交论文的合适审稿人,我们将使用多伦多论文匹配系统(Toronto Paper Matching System)来进行协助筛选。

  作为提交过程的一部分,作者需要允许使用“论文匹配服务”的许可,向 ICML2019 提交论文的作者应允许使用该服务。

  关于一稿多投

  提交与之前已发布或已接收的相同(或基本相似)的论文,或向其他会议同时提交相同论文是不合适的。此种行为违反了我们的一稿多投政策。

  这个规则有几个例外:

  允许提交已提交给期刊、但尚未在该期刊上发表的论文的精简版本。

  作者有责任确保相关期刊允许向本会议同时提交相关论文。

  下列情况下的论文允许提交:在未列入 Proceeding 的情况下,在会议或研讨会上提交或待提交的论文(例如 ICML 或 NeurIPS 研讨会),仅发表过摘要部分的论文。

  曾作为技术报告提交的论文(或在 arXiv 中已提交的预印本)允许向本届 ICML 提交。在这种情况下,我们建议作者不要引用该报告,以保持匿名性。

  论文作者对审稿意见的回复

  目前暂定 3 月 9 日到 3 月 14 日期间,作者可以查看评议意见,并发表回复内容。

  作者的回复的目的是改变审稿人对论文的判断,回复内容最长不超过 5000 个字符。论文的任何一位作者都可以输入/编辑作者回复,回复内容可以进行编辑或还原,直到截止日期为止。

  论文审稿是双盲的。请勿在回复中包含可识别出作者/共同作者的任何信息。请勿在回复中包含任何网址。

  作者在拟定回复内容时应该做好判断。没有必要对每个小问题或改进建议逐一回复。而应该将这些回复视作解决问题的好机会,比如针对审稿人对论文的某一点不确定、审稿人做出的错误假设、或者审稿人误解了论文中的某一部分等问题进行解释。我们建议在作者回复意见中保持礼貌和专业。

  ICML 2018:录取率 25%,两篇最佳论文回顾

  机器学习顶会 ICML 2018 于 7 月 10 日~15 日在瑞典首都斯德哥尔摩举办,2018 年 ICML 共收到 2473 篇投稿论文,比 2017 年的 1676 篇增加了 47.6%。最终入选的论文一共 621 篇,录取率 25%。

ICML 2019论文录取Top100:谷歌霸榜-冯金伟博客园

  ICML 2018 最佳论文奖有两篇获奖论文,第一篇的作者分别是来自 MIT 的 Anish Athalye 以及来自 UC Berkely 的 Nicholas Carlini 和 David Wagner,另一篇的作者则全部来自 UC Berkely。

  最佳论文一:

  Obfuscated Gradients Give a False Sense of Security: Circumventing Defenses to Adversarial Examples

  Anish Athalye (MIT), Nicholas Carlini (UCB), David Wagner (UCB)

  论文地址:https://arxiv.org/pdf/1802.00420.pdf

ICML 2019论文录取Top100:谷歌霸榜-冯金伟博客园

  GitHub:github.com/anishathalye/obfuscated-gradients

  基于神经网络的分类器通常被用于图像分类,它们的水平通常接近人类。但是,这些相似的神经网络特别容易受到对抗样本和细微的干扰输入的影响。下图是一个典型的对抗样本,对原图增加一些肉眼看不见的扰动后,InceptionV3 分类器把猫分类成了鳄梨酱。根据 Szegedy 等人 2013 年的研究显示,这种“愚蠢的图像”仅用梯度下降法就能合成,这类发现为物体检测研究敲响了警钟。

ICML 2019论文录取Top100:谷歌霸榜-冯金伟博客园

  在这篇论文中,作者评估了 ICLR 2018 接收的 9 篇论文,并测试了它们面对对抗样本的稳健性。实验结果证实,在 8 篇有关对抗样本的防御机制的论文中,有 7 篇的防御机制都抵挡不住论文提出的新型攻击技术,防御水平有限。

  最佳论文二:

  Delayed Impact of Fair Machine Learning

  Lydia Liu, Sarah Dean, Esther Rolf, Max Simchowitz, Moritz Hardt (全员 UCB)

  论文地址:https://arxiv.org/pdf/1803.04383

ICML 2019论文录取Top100:谷歌霸榜-冯金伟博客园

  博客:bair.berkeley.edu/blog/2018/05/17/delayed-impact/

  机器学习的基础理念之一是用训练减少误差,但这类系统通常会因为敏感特征(如种族和性别)产生歧视行为。其中的一个原因可能是数据中存在偏见,比如在贷款、招聘、刑事司法和广告等应用领域中,机器学习系统会因为学习了存在于数据中的历史偏见,对现实中的弱势群体造成伤害,因而受到批评。

  ICML 2019 也即将在 6 月 9 日召开,对于今年的最佳论文,我们也可以抱以期待。

  那么,今年的 ICML 2019,你的论文被录取了吗?