Redian新闻
>
又爆作弊丑闻?AAAI 2023审稿人被作者找上门,才发现rebuttal阶段审稿人互相可见

又爆作弊丑闻?AAAI 2023审稿人被作者找上门,才发现rebuttal阶段审稿人互相可见

公众号新闻



  新智元报道  

编辑:Aeneas 好困
【新智元导读】AAAI 2023进入rebuttal阶段时,竟然有一位审稿人被论文作者认了出来,找上了门。

前几天,AAAI 2023的第二轮审稿意见已经出炉。

但谁能想到,一位审稿人身上发生了一件怪事。

他审过的一篇论文的作者竟然找上门来,要求他给自己更改分数。

等等,一向是匿名的AAAI,是怎么让作者找到审稿人的呢?

这个问题,很可能就出在了今年的政策上。

明目张胆走后门


在rebuttal期间,这位审稿人震惊地发现,审稿人之间竟然可以互相看到对方的名字!

如果审稿人能互相看到名字,就滋生了大量的灰色地带。

因为不能排除其他审稿人和论文作者认识的可能性,所以这种「透明」给了论文作者很大的作弊空间。

而在所有会议和期刊中,作者联系审稿人都是被明令禁止的。

这位审稿人在帖子中表示,自己并没有去联系meta审稿人。而且很显然,自己的身份已经暴露了,无论自己接下来做什么,论文作者都会知道。

对于这个事件,他是这样处理的:给主席发了匿名邮件,提醒他们修改这种不合理的匿名制度,在此过程中,他并没有透露作者的名字。

而主席的回复是一句「谢谢」。

有网友提出,这篇论文应该立刻被主席拒绝。

此外,除了这种被作者找上门的「极端」情况,「公开」审稿人的操作还可能会引发其他的问题。

来自香港理工的在读博士生「睡不醒的芋泥」就举了个例子,比如你和你熟人两人持相反意见,谁都不想驳谁面子,可能就会各自维持分数不变了。

知乎网友「ICOZ」也表示:「这样更容易搞关系和得罪人。而且投稿人有更多可能性打听到谁在审他的稿。」

果然无论走到哪里,「关系社会」都是不可能避开的。

当然,格局打开一点,这样倒是可以反向操作,筛一下充值过的审稿人。(手动狗头)

虽然大家一致认为这种审稿人能互相看到的设定很奇怪,但有网友表示,没什么可大惊小怪的,在很多小型会议中,这其实是基操了。因为同行评审本质上是一种「荣誉制度」。

评审结果突然「喜加一」


根据大会的安排,作者会在10月20日到24日收到反馈,也就是第二轮审稿的结果。

11月18日,就会通知录用结果。

官方在邮件中称,69%的论文有4个或4个以上的审稿人,96%有3个或3个以上的审稿人。

但有趣的是,不止一位网友表示自己的论文只分到了2个,大概这就是剩下的那4%吧。

更有网友表示,自己只收到了1个评审结果。而理论上,每篇论文至少会有2位审稿人。

不过,也不用担心,因为新的结果很可能已经在路上了!

比如,审稿人审着审着突然发现自己的工作量喜加一……

来源:王文昊

而作者这边也很可能会突然蹦出一个新的意见。如果运气「好」的话,甚至还会是在rebuttal快些好的时候。

这个问题的绝望之处在于,rebuttal的字数是限定的——就5000个。

来源:zodiacg

另外,也有网友表示,审稿人给出的结果差异是不是有点太大了(3, 10, 4),同行评审简直就是刮彩票啊……

对此有网友回复说,你是打算摇一个777出来么?

不过还真别说,虽然777没有,但是7777是有的。(手动狗头)

来源:聚丙烯酰胺

在去年,AAAI2022在第一轮审稿意见邮件中的说法,是录用率将控制在25%左右,而最终录用率仅为15%。

审稿流程


对于AAAI 2023来说,采用的依然是两阶段+双盲的审稿形式。

在第1阶段中,每篇论文会得到两名审稿人。如果收到的两份意见都是负面的,那么这篇论文就会被直接拒绝。其余的将进入到第2阶段。

在第2阶段中,每篇论文会得到至少两名新的审稿人。在新的审稿人提交自己的意见之前,他们是不会看到第1阶段的审稿结果的。而进入第2阶段的论文作者,可以针对所有的审稿意见进行rebuttal。程序委员会和高级程序委员会将会根据作者的反馈进行讨论。

至于具体的操作方法,可以参考下面的这篇论文。该论文提出了一种新颖的审稿人-论文匹配方法,并且已经在AAAI 2021、ICML 2022、AAAI 2022和IJCAI 2022上被全部或部分采用。

论文地址:https://arxiv.org/abs/2202.12273

3000块买strong accept?


就在今年8月,AAAI就闹出过一次风波。

当时正值AAAI 2023论文截止提交之际,知乎上突然出现了一张AI投稿群的匿名聊天截图。其中有人声称,自己可以提供「3000块一个strong accept」的服务。

可上下滑动进行查看

此截图一出,一度在网上闹出轩然大波。后来被证明,大概率是网友口嗨。

不过,这个梗显然还没翻篇。

从拒稿率太高被吐槽、审稿结果诡异(得到4个accept结果被拒),到现在被爆出作者走后门,AAAI是有些「腥风血雨」的体质在身上的。

截至发稿前,不知出于何种原因,当事人已经在删除了相关帖文。

参考资料:

https://www.reddit.com/r/MachineLearning/comments/ydyzlk/dcheating_in_aaai_2023_rebuttal/

https://www.reddit.com/r/MachineLearning/comments/y9d6f6/d_aaai_2023_reviews/

https://www.zhihu.com/question/549071929





微信扫码关注该文公众号作者

戳这里提交新闻线索和高质量文章给我们。
相关阅读
按摩与药物古人类DNA与重症新冠有关?2022诺奖得主Pääbo,竟是前诺奖得主私生子新财年10月排期表已出!EB-2和EB-3移民排期前进二个月左右, EB-5区域中心及EB-5直投项目移民排期倒退了275天一条导盲犬,身价20万?看完1700万盲人的真实生活,才发现这只是最低级的困境More Chinese Minors Are Online But Fewer Addicted, Report SaysGary Marcus又来「整顿」AI圈:LeCun不可信,Nature审稿人没用脑子马斯克耍完威风,美法院找上门,中国车企重磅出击,成功反超!康奈尔突发4起迷奸惨案! 美国大学兄弟会中到底还有多少丑闻?夏威夷“末代公主”过世!年轻时曾在上海读书,晚年陷入被同性恋人虐待、遗产撕X丑闻?The Winners of China’s Housing Bust: Burnouts and Beach BumsNeurIPS 2022 | Rebuttal起死回生!对攻击者的攻击:一种真实场景下的防御喜欢用手扣身上这个“洞”?千万别!小心老年痴呆找上门 初症状就是失去该功能研一学弟成顶会审稿人。。刚刚!澳总理艾博年在圣诞节致辞,重点感谢了这些人!在悉尼为弱势群体提供圣诞大餐,鼓励澳人互相关爱,共渡难关!ICLR盲审阶段被审稿人赞不绝口的论文:会是Transformer架构的一大创新吗?Hunan Shuts Access to Forest Areas to Prevent More Wildfires比胆固醇更伤血管,有人却吃上瘾!再不戒掉,可能会心脑血管疾病找上门台北故宫博物院又爆损毁文物丑闻?事情没那么简单加斯佩半岛自驾 (七)佛罗伦国家公园 (Forillon National Park)美国大学的“作弊”和你以为的“作弊”一样吗?哪些“小抄”是被允许的?国际象棋"肛珠作弊案"结局!没找到肛珠,却揪出更多作弊者?!计划经济是充满生机和活力模式突然发布!这种"糖"多吃或致癌!10万人10年跟踪试验!每天一点,心脏病+中风+血管病或找上门?!华人超爱!餐桌到处有它!顶会审稿人:如何从零开始完成自己的一作Paper?“我们的祖先到底是谁?为何智人胜出?”丨2022诺奖深入回答了这些问题。附Svante Pääbo趣闻投机取巧!数年拖欠税务200万,华男被IRS找上门,恐面临坐牢五年...大瓜!马斯克自曝:FBI花350万美元让推特删帖,禁言,压下拜登儿子丑闻?重磅!美国移民2023年1月排期出炉,EB1重回排期时代,EB2、EB3排期停滞不前才发现,字节面试可以“作弊”!如何在英国成为一名医生?GCSE和A-level阶段怎么准备?特朗普生命中最重要的女人(多图)加斯佩半岛自驾 (七)佛罗伦国家公园 (图)
logo
联系我们隐私协议©2024 redian.news
Redian新闻
Redian.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Redian.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。