ACL2022引入滚动审稿机制Deadline不足一个月啦-亚洲ca88官方网站

发布时间:2024-08-25 05:21:35 来源:亚洲ca88官方网站

  ,以提高ACL系列会议的审稿效率和质量,并优化当前ACL会议的自由审稿流程。

  根据官方说明,ARR使用OpenReview作为审稿平台(审稿意见不会公开),作者可在每个月的15号(截稿日期)之前,将论文提交到统一的ARR审稿池,由Action Editor(AE)处理,并且允许论文修改后重新提交(与期刊类似)。整一个流程会在每个月截稿后的30-35天左右完成。

  近日,ACL在官网上发布报告,从论文提交数、审稿人数量和审稿周期三个方面汇报了目前ARR机制的使用效果和要解决的问题。

  报告多个方面数据显示,截止9月OpenReview平台的投稿论文已达到312篇。这些论文已匿名,并通过机器人ARRPreprints在推特上进行了发布。截至目前,ARRPreprints账号有343个关注,与同类账号相比略少。大多数推文的点击量约为100-200次,也有少数推文的点击量高达1.5万次。

  ARR的最初目标是在35天内完成所有的审稿和元审稿(meta-review)流程:每个月截稿后,AE需要在7天内处理最多5篇论文,确定论文是不是真的存在利益冲突(COI),并满足基本格式和要求。经过推荐审稿人的二次评审后,AE在35天内阅读审稿意见并与审稿人讨论,撰写最终的meta-review。

  需要说明的是,ACL 2021从提交到讨论(不包括元审稿时期)需要51天,是ARR审稿和元审稿的两倍;从提交到录用通知需要92天,是ARR目标时长的3倍。

  从结果上来看,虽然ARR机制还未达到承诺的评审周期,但还是明显压缩了的评审时间。

  下图显示,少数审稿人在20天内完成了审稿,大部分人在30天左右完成审稿,还有四分之一的人需要40天才能完成审稿,也不乏个别审稿人用了90天。相比于ACL 2021,绝大部分人能够在51天之前完成。(两条虚垂直线的讨论和通知日期)。

  (注:这张图表不包括24个还没完成的审稿,其中大多数都是8月截止日期前的论文)

  下图为论文从提交到元审稿结束所用的时间,大部分都是ACL 2021审稿结点之前完成的。

  ARR机制只负责审稿,不决定论文是否会被接收,通过ARR审稿的论文及评审意见将被提交至对应的会议或Workshop。下图显示,目前已有26篇论文通过ARR审稿并提交到了主会议。

  ARR目前面临的挑战仍是审稿不及时的问题。截至2021年9月,还有一篇6月的论文没完成3轮审核,非规定时间内完成审稿的情况几乎每个月都有发生。造成此现状的原因,一方面出自技术层面和工作失误(例如没有及时发送提示),但主要还是审稿人对审核工作不够积极。对此,报告提出了两点解决方案:

  AE面临的最大难题就是审稿人拒绝审核,这也是审稿工作不及时的根本原因。为何会出现这样一种情况,可能有以下两点原因:1. 部分审稿人认为分配的论文质量太差,主观不愿意评审;2. 审稿人专业方向与论文不够匹配,短时间无法完成。

  一般来讲,审稿人在提交截止日期前能申请免除审核,通过后可以拒绝评审。报告提出计划取消申请环节,让审稿人没理由拒绝审核。此外,为了方便审稿人与AE之间交流和沟通,来往电子邮件将显示AE和审稿人的姓名和身份。

  ARR面临的技术障碍是将OpenReview系统扩展到一个新的应用。在许多大型会议上,OpenReview已成功使用了好几年,包括NeurIPS和ICML。但在这些使用案例里,每个审稿池只有一个截止期限。而ARR每个月都有截止交稿日期,因此,OpenReview每个月都需要创建一个全新的会议。ARR工作人需要把前一个月的审稿人和AE复制过来,这大大加重了他们的编辑工作。比如说,不可能在一个地方跟踪所有缺席的审稿人和元审稿人,同样地,目前还不可能在几个月内跟踪和平衡总体审稿负载。对此,ACL计划改进审稿流程,加强与OpenReview研发人员的密切合作,打造一个更流畅、简便的审核平台。

  ACL 2022 和NAACL 2022已正式引入ARR机制。随着ARR系统的引入,论文投稿和审稿流程也发生了一些变化。ACL 2022程序委员会已在博客中对ACL 2022的投稿细节进行了说明:

  作者如果要想投稿至ACL 2022,则必须在11月15日前提交至ARR,不过作者也可以在9月15日或者10月15日提交到ARR,以尽早获得审稿意见并对论文加以修改。

  作者需要将已经经过ARR审稿后的论文、审稿意见、综合审稿意见提交到ACL 2022。同时,作者可以附加一个“向高级领域主席的备注信息”。)

  ACL 2022 将于 2022 年 5 月 22 日至 27 日在爱尔兰都柏林召开。有必要注意一下的是,今年ACL 设置一个特殊主题:语言多样性:从低资源语言到濒危语言。官方表示,ACL 2022 将与 ARR 合作,为这一特殊主题选择 Action Editor 和审稿人,并为这一主题的论文提供一种特殊的审稿形式。据悉,特殊主题接收的论文将以 oral 或 poster 的形式呈现,还将评选出一个最佳专题论文奖。

  Groq 获 6.4 亿美元融资;传 ResNet 作者张祥雨加盟阶跃星辰;OpenAI 研发 ChatGPT 文本水印丨AI情报局

  传月之暗面完成 3 亿美元融资,最新估值 33 亿美元;OpenAI 加持,最强人形机器人 Figure 02 登场丨AI情报局

  埃斯顿机器人获 4.5 亿元增资;AI 大牛周志华任南京大学副校长;论文也能发弹幕!斯坦福在线论文平台火爆丨AI情报局

  OpenAI 6000 万美元领投网络摄像头公司 Opal;秘塔科技获超 1 亿元人民币融资,蚂蚁集团领投丨AI情报局

  AMD 6.65 亿美元收购 Silo AI;Genie 击败 Devin、GPT-4,刚获 250 万美元融资丨AI情报局

  密苏里大学许东:大模型时代,Prompt 为生物信息学研究带来新动力丨IJAIRR

  对话南洋理工大学安波教授:如何让大语言模型适应动态环境?丨IJAIRR

  新加坡国立大学赖载兴教授专访:用混沌边缘改善神经网络,与上帝掷骰子 IJAIRR

  专访腾讯AI Lab姚建华、杨帆:腾讯 AI Lab 为何瞄准单细胞蛋白质组学?

上一篇:这本1分+国产期刊国人占比七成五审稿速度快! 下一篇:【48812】影响因子5191审稿全体较快收稿规模广中科院升2区TopJCR1区
分享到: