报道  

编辑：Aeneas 好困

【导读】AAAI 2023进入rebuttal阶段时，竟然有一位审稿人被论文作者认了出来，找上了门。

前几天，AAAI 2023的第二轮审稿意见已经出炉。

但谁能想到，一位审稿人身上发生了一件怪事。

他审过的一篇论文的作者竟然找上门来，要求他给自己更改分数。

等等，一向是匿名的AAAI，是怎么让作者找到审稿人的呢？

这个问题，很可能就出在了今年的政策上。

明目张胆走后门

在rebuttal期间，这位审稿人震惊地发现，审稿人之间竟然可以互相看到对方的名字！

如果审稿人能互相看到名字，就滋生了大量的灰色地带。

因为不能排除其他审稿人和论文作者认识的可能性，所以这种「透明」给了论文作者很大的作弊空间。

而在所有会议和期刊中，作者联系审稿人都是被明令禁止的。

这位审稿人在帖子中表示，自己并没有去联系meta审稿人。而且很显然，自己的身份已经暴露了，无论自己接下来做什么，论文作者都会知道。

对于这个事件，他是这样处理的：给主席发了匿名邮件，提醒他们修改这种不合理的匿名制度，在此过程中，他并没有透露作者的名字。

而主席的回复是一句「谢谢」。

有网友提出，这篇论文应该立刻被主席拒绝。

此外，除了这种被作者找上门的「极端」情况，「公开」审稿人的操作还可能会引发其他的问题。

来自香港理工的在读博士生「睡不醒的芋泥」就举了个例子，比如你和你熟人两人持相反意见，谁都不想驳谁面子，可能就会各自维持分数不变了。

知乎网友「ICOZ」也表示：「这样更容易搞关系和得罪人。而且投稿人有更多可能性打听到谁在审他的稿。」

果然无论走到哪里，「关系社会」都是不可能避开的。

当然，格局打开一点，这样倒是可以反向操作，筛一下充值过的审稿人。（手动狗头）

虽然大家一致认为这种审稿人能互相看到的设定很奇怪，但有网友表示，没什么可大惊小怪的，在很多小型会议中，这其实是基操了。因为同行评审本质上是一种「荣誉制度」。

评审结果突然「喜加一」

根据大会的安排，作者会在10月20日到24日收到反馈，也就是第二轮审稿的结果。

11月18日，就会通知录用结果。

官方在邮件中称，69%的论文有4个或4个以上的审稿人，96%有3个或3个以上的审稿人。

但有趣的是，不止一位网友表示自己的论文只分到了2个，大概这就是剩下的那4%吧。

更有网友表示，自己只收到了1个评审结果。而理论上，每篇论文至少会有2位审稿人。

不过，也不用担心，因为新的结果很可能已经在路上了！

比如，审稿人审着审着突然发现自己的工作量喜加一……

来源：王文昊

而作者这边也很可能会突然蹦出一个新的意见。如果运气「好」的话，甚至还会是在rebuttal快些好的时候。

这个问题的绝望之处在于，rebuttal的字数是限定的——就5000个。

来源：zodiacg

另外，也有网友表示，审稿人给出的结果差异是不是有点太大了（3, 10, 4），同行评审简直就是刮彩票啊……

对此有网友回复说，你是打算摇一个777出来么？

不过还真别说，虽然777没有，但是7777是有的。（手动狗头）

来源：聚丙烯酰胺

在去年，AAAI2022在第一轮审稿意见邮件中的说法，是录用率将控制在25%左右，而最终录用率仅为15%。

审稿流程

对于AAAI 2023来说，采用的依然是两阶段+双盲的审稿形式。

在第1阶段中，每篇论文会得到两名审稿人。如果收到的两份意见都是负面的，那么这篇论文就会被直接拒绝。其余的将进入到第2阶段。

在第2阶段中，每篇论文会得到至少两名新的审稿人。在新的审稿人提交自己的意见之前，他们是不会看到第1阶段的审稿结果的。而进入第2阶段的论文作者，可以针对所有的审稿意见进行rebuttal。程序委员会和高级程序委员会将会根据作者的反馈进行讨论。

至于具体的操作方法，可以参考下面的这篇论文。该论文提出了一种新颖的审稿人-论文匹配方法，并且已经在AAAI 2021、ICML 2022、AAAI 2022和IJCAI 2022上被全部或部分采用。

论文地址：https://arxiv.org/abs/2202.12273

3000块买strong accept？

就在今年8月，AAAI就闹出过一次风波。

当时正值AAAI 2023论文截止提交之际，知乎上突然出现了一张AI投稿群的匿名聊天截图。其中有人声称，自己可以提供「3000块一个strong accept」的服务。

可上下滑动进行查看

此截图一出，一度在网上闹出轩然大波。后来被证明，大概率是网友口嗨。

不过，这个梗显然还没翻篇。

从拒稿率太高被吐槽、审稿结果诡异（得到4个accept结果被拒），到现在被爆出作者走后门，AAAI是有些「腥风血雨」的体质在身上的。

截至发稿前，不知出于何种原因，当事人已经在删除了相关帖文。

参考资料：

https://www.reddit.com/r/MachineLearning/comments/ydyzlk/dcheating_in_aaai_2023_rebuttal/

https://www.reddit.com/r/MachineLearning/comments/y9d6f6/d_aaai_2023_reviews/

https://www.zhihu.com/question/549071929

点个在看 paper不断！