您正在使用IE低版浏览器,为了您的雷峰网账号安全和更好的产品体验,强烈建议使用更快更安全的浏览器
此为临时链接,仅用于文章预览,将在时失效
人工智能学术 正文
发私信给蒋宝尚
发送

0

IJCAI的警示!顶会灌水越来越难,AI顶会总录用率已经连续下降多年

本文作者: 蒋宝尚 2020-04-21 19:17 专题:IJCAI 2019
导语:审稿人的心,还真是海底针。

IJCAI的警示!顶会灌水越来越难,AI顶会总录用率已经连续下降多年


IJCAI 2020 经历了灭霸式拒稿,无反馈评审意见,终于还是迎来了开奖。12.6% 的 main track 接受率,仅仅有592篇中奖,号称年度录取率最低的CCF A类会议。

IJCAI的警示!顶会灌水越来越难,AI顶会总录用率已经连续下降多年

IJCAI-PRICAI 2020 Notification Email最低的录取率,一再拖延的开奖日期,众多“AI-er”直呼IJCAI女神回归。据知乎网友“王云鹤”介绍,整个会议论文的评审流程都经历了一次summary rejection,也即无理由拒稿率将近一半。

IJCAI的警示!顶会灌水越来越难,AI顶会总录用率已经连续下降多年

(雷锋网)

整体的录用名单,录用论文领域的分布,官网尚未有更多信息放出。不过相比IJCAI 2019放榜论文录取结果:4752篇接收投稿,17.9的%录取率。会议录取率和投稿数量都有所下降。

IJCAI的警示!顶会灌水越来越难,AI顶会总录用率已经连续下降多年

(雷锋网)

近3年AAAI和IJCAI会议的投稿量和录取比率再对比2017年和2018年,虽然有的年份接收论文数量增加,但可以清晰的看到录用结果逐年降低。根据以前的数据,IJCAI 2018的接收论文中,46%的论文来自中国,57%的论文来自亚洲。而IJCAI2019 收录的 850 篇论文中,有 327 篇来自中国,占比 38%。可以猜想今年的IJCAI 2020论文收录还是中国人占大头。不过,今年的情况具体如何,等到大会召开恐怕才能知晓。

网友评论:12.6%的录用率,够狠!

论文结果尚未给出时候,知乎话题《如何看待IJCAI 2020录用结果?》就一度登上知乎热榜,沸腾程度超越了话题“北京大风”。据知乎话题中答者披露,评审质量褒贬不一,有的夸reviewer审稿负责意见充分全面;有的则表示:“IJCAI真渣,我努力了这么久,连个meta reviews都不给。”

IJCAI的警示!顶会灌水越来越难,AI顶会总录用率已经连续下降多年

(雷锋网)

还有有网友提到,如果考虑到summary rejection,录取率或许没那么低。

IJCAI的警示!顶会灌水越来越难,AI顶会总录用率已经连续下降多年

还有披露投稿小技巧的。

IJCAI的警示!顶会灌水越来越难,AI顶会总录用率已经连续下降多年

审稿人的心,真是海底针!

IJCAI的警示!顶会灌水越来越难,AI顶会总录用率已经连续下降多年

估摸着论文会成为步入婚姻殿堂的一份礼物!


顶会趋势:投稿量逐年递增,录用率逐年下降

IJCAI的警示!顶会灌水越来越难,AI顶会总录用率已经连续下降多年

图注:5大会议投稿数量趋势图

IJCAI的警示!顶会灌水越来越难,AI顶会总录用率已经连续下降多年

图注:5大会议加总之后,会议录用率趋势

如上图所示,不光是IJCAI,其他的人工智能顶会如AAAI、CVPR的录用率也有逐年下降的趋势,这意味着投稿一些顶级会议越来越难被接收。主要原因是投稿数量逐年增多,竞争激烈,同时录取比例也在降低。

IJCAI的警示!顶会灌水越来越难,AI顶会总录用率已经连续下降多年

图注:论文投稿数量加总之后的趋势

但是从上图,我们可以看出,在假设NeurIPS 2020投稿量达到8000篇的时候,似乎会出现一个小的拐点。虽然在2017年的时候,NIPS程序主席笑称注册参会者将会超过全球人类数量,但事实是搞AI科研的人数总是那么多,在增长到一定幅度之后,就会达到饱和。

什么时候会达到峰值呢?我们大胆猜想2020年或会是个拐点,毕竟今年大家普遍认为,论文发表的数量已经不是太重要,还是“质量为王”。

IJCAI的警示!顶会灌水越来越难,AI顶会总录用率已经连续下降多年

图注:CVPR会议录用汇总以CVPR为例,作为计算机视觉领域的顶级学术会议,2020年共收到了 6656 篇有效提交论文,共接收了 1470篇论文,接收率接近 22%。

虽然是第二次接收论文数量超过一千篇,但对比 CVPR 2019,其论文接收率 25%,1300的接受量, 2020年的22%算是三连降了。

IJCAI的警示!顶会灌水越来越难,AI顶会总录用率已经连续下降多年

图注:AAAI会议录用汇总

AAAI 2020 录取率只有 20.6%,数量为1591篇,虽然收录率比去年的 16.2% 高出了四个百分点,但是相比2018和2017确低了很多。

IJCAI的警示!顶会灌水越来越难,AI顶会总录用率已经连续下降多年

图注:NeurIPS会议录用汇总NeurIPS 2020截稿期尚未结束,观察之前的数据发现,虽然近几年接受率稳定在20%左右,但相比投稿量的增幅,录用率还是保守了。

IJCAI的警示!顶会灌水越来越难,AI顶会总录用率已经连续下降多年

图注:ICLR会议录用汇总ICLR录用率则是四连降,从2017年的40.4%的论文接受率到2018年的35.9%,再到2019年的31.55%,最后2020年的录用率是26.48%。相比投稿数据的逐年成倍数的递增,与接受率形成鲜明的对比。

IJCAI的警示!顶会灌水越来越难,AI顶会总录用率已经连续下降多年

图注:IJCAI会议录用汇总IJCAI作为一直是、仍然是,并且估计仍将持续是AI领域的顶会,最初两年一届的召开频率一度认为比AAAI更难。如上图所示,IJCAI 2015年之后虽然改为每年一届,但是接受率越来越低,今年更是达到了12.6%。

对此,你有和看法,欢迎在留言区评论!

雷峰网原创文章,未经授权禁止转载。详情见转载须知

IJCAI的警示!顶会灌水越来越难,AI顶会总录用率已经连续下降多年

分享:
相关文章
当月热门文章
最新文章
请填写申请人资料
姓名
电话
邮箱
微信号
作品链接
个人简介
为了您的账户安全,请验证邮箱
您的邮箱还未验证,完成可获20积分哟!
请验证您的邮箱
立即验证
完善账号信息
您的账号已经绑定,现在您可以设置密码以方便用邮箱登录
立即设置 以后再说