Bendi新闻
>
终于,NLP顶会ACL投稿不用匿名了

终于,NLP顶会ACL投稿不用匿名了

5月前
机器之心报道
编辑:泽南、蛋酱
再也不怕大会投稿被占坑了?


对于自然语言处理领域的研究人员,最近有一条好消息。

近日,计算语言学协会年会(ACL)正式宣布,该系列会议论文投稿已取消匿名期,同时允许作者在投稿期间宣传自身工作。新规定直接适用于下一个审稿周期。


今年的 ACL 是第 62 届,将于 2024 年 8 月 11 日至 16 日在泰国曼谷举行。自 2022 年起,ACL 启用了滚动审稿机制(ACL Rolling Review,ARR),每月设 deadline。需要注意的是,在上一个截止日期之前提交给评审流程的论文仍受旧匿名政策的约束。

大会声明链接:https://www.aclweb.org/portal/

据了解,ACL 会方是在最新一期工作组报告的建议下实行了新规的,新的政策也会对奖项产生影响。这一调整立即获得了研究社区的欢迎:


在报告《Report of the ACL Committee on the Anonymity Policy》中,工作组指出自 2017 年起 ACL 实行的双盲评审规则成功地减少了匿名审稿期间可作为预印本的论文数量。ACL 2023 上有预印本的提交比例为 13.8%,而 ICML 和 ICLR(均对预印本没有任何限制)等机器学习会议的相应比例通常在 30% 以上。

虽然匿名在 arXiv 上提交预印版并不会破坏双盲评审,但根据 ACL 2023 审稿过程中收集的信息,91% 的投稿保持完全匿名,即审稿人无法猜测作者身份,可猜测作者身份的投稿(有预印本)比例为 4% 左右,相当于所有带预印本提交的论文的 30% 左右。

工作组认为,原有双盲评审政策显然已经产生了一些负面影响。作者可能会急于在匿名截止日期之前发布预印本,这会破坏预印本的质量。此外,由于作者必须等到论文接收后才能更新预印本,因此他们无法在匿名期间纠正错误或添加新结果,包括改变工作结论的结果。

禁止作者更正公共记录与科学研究的价值观格格不入。另一方面,选择不提交 arXiv 预印版的作者可能需要等待很长时间才能发表论文。在某些情况下,这会导致他们的工作被在此期间发表或预印的其他论文(通常是非 ACL 论文)抢先。

由于 AI 领域,特别是 NLP 领域研究节奏的加快,维持当前评审方式正在变得越来越困难。许多 ACL 作者指出,相对于许多不认同 ACL 方式的机器学习会议(如 ICML、ICLR、NeurIPS 和 AAAI),以及相对于自行发表的有影响力的行业实验室,当前的双盲评审使他们经常处于不利地位。这使得 NLP 社区变得支离破碎,ACL 会议面临着失去优秀作者、审稿人以及声誉下降的巨大风险。

新的政策旨在促进科学交流,作者仍然被鼓励在论文接收之前不要过度宣传工作(因为这可能会导致审稿人偏见而影响论文评分)。此外,不提交预印版或在社交媒体上提前宣传也可以提升论文获奖的机会。

此前,CVPR 的「社交媒体禁令」也出现了松动的迹象。

2023 年 11 月 25 日,作为 CVPR 2024 Publicity Co-chair 的 Kosta Derpanis 教授曾在个人推特上透露,CVPR 2024 关于投稿社交媒体宣传的立场有一些变化。


根据 CVPR 2023 会议的投票结果,只要不提及 CVPR,作者可以在社交媒体上谈论他们已提交给 CVPR 的研究成果。因此,无论你是否向 CVPR 投稿,都可以在社交网络上谈论研究。你可以宣传自己发布的 arXiv 论文、在线进行演示等。但是,作者不得谈论研究目前正在 CVPR 审稿阶段。这既适用于社交媒体发布,也适用于与媒体的公开讨论。


鉴于 CVPR 2024 官方推特账号随后转发了这条动态,新规则变动的可信度大大提升。

CVPR 的社交媒体禁令起始于 2021 年。禁令颁布的背景,是马普智能系统研究所所长 Michael Black 提出的一项动议:审稿期间禁止在社交媒体上宣传论文,在 arXiv 上自动发布的预印本论文除外。

当时,这一动议引发了众多研究者的不满。图灵奖获得者 Yann LeCun 也公开表示:「这种行为会限制科学信息的交流,损害技术进步且违反道德规范。简而言之就是疯了。」


不过这项动议最终还是高票通过。大会官方宣布,面向所有 CVPR 2022 的投稿作者,从 2021 年 10 月 19 日到 2022 年 3 月 2 日为社交媒体静默期。在此期间,任何由作者主动发起的对论文的社交媒体宣传都被视为违反政策。

值得注意的是,将论文放在 arXiv 上供专家进行早期分析,与在社交媒体上向广大受众进行宣传有本质不同,投 CVPR 的论文放在 arXiv 上还是被允许的。原因是 arXiv 论文并不是「已发表」,而应该被理解为「预发表」的状态。

这项操作的目的是解决同行评审中的偏见问题,但打击社区内交流会带来很多消极后果,而且同行评审中的偏见问题未必能真正改善。

或许是引发了太多反对的声音,如今机器学习领域,对于禁止社交媒体宣传的规定已有所缓和。



© THE END 

转载请联系本公众号获得授权

投稿或寻求报道:[email protected]

微信扫码关注该文公众号作者

来源:机器之心

相关新闻

ChatGPT也在评审你的顶会投稿,斯坦福新研究捅了马蜂窝,“这下闭环了”全球首个无男性机舱!航空公司推出女性专属选座权利!帮助避开男性乘客!女网友高兴坏了“终于不用跟男的坐一起了!确定了!终于不用带饭了!学校统一配送的午餐里到底都有啥?!等了9年!​​火爆全球华人圈的演唱会终于来了!注意!DMV将不再办理这些线下业务,终于不用再排队了!注意!即日起DMV将不再办理这些线下业务,终于不用再排队了!爽!这个夏天终于不用穿内衣了,不论你是A、B、C杯BC Hrdro免费送空调了!还包安装!手把手教你怎么申请!这个夏天终于不用忍耐酷暑了!爽!这个夏天终于不用穿内衣了,不论你是A、B、C杯!普京发威,大战开始!美国终于要顶不住了,北约准备参战——刚刚!加拿大移民承认这项语言成绩!终于不用考雅思了!2天就出结果临近开学,澳洲留学生终于不用经典开局了...来这免费包你三餐!终于实现不用刷马桶了!有了它,马桶很干净这件免bra吊带杀疯了!终于可以光明正大不用穿内衣了!【波士顿顶级设计师终于出手了】【免中介费+免1.5月房租】【最低$2500起】【剑桥/红线】【3室户型也有】【暑期任意时间入住】《自然》大发现:约70%孕妇会孕吐,原因终于找到了!地球上最会赚钱的人,留下了哪些顶级判断力思维? |【经纬低调分享】终于不用为GPU算力发愁了,请低调使用!H Mart要开新店了!DFW此地民众雀跃“终于不用每周往城里跑了!”人工智障机器人终于来了点新活,这次会做粤菜了视觉Mamba收录顶会!Mamba论文合集来了要不是演唱会,我都忘记这位过气顶流了征集了100个25季留学申请疑难问题!藤校学霸和招生官们终于出手了!| 留明教育名师会客室登顶票房冠军,“抗日神片”这次终于出息了!
logo
联系我们隐私协议©2024 bendi.news
Bendi新闻
Bendi.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Bendi.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。