选自medium

作者:Devi Parikh

机器之心编译

机器之心编辑部

优秀的 rebuttal 能绝地逢生,糟糕的 rebuttal 会过犹不及!

我们都知道,对于顶会投稿来说,rebuttal 是必不可少的一个阶段。通过 rebuttal,投稿人可以根据意见内容来更正审稿人理解上的错误、解释/澄清审稿人的疑惑,并提供更多方法和实验细节等内容。所以,如果论文本身足够硬核的话,审稿人在 rebuttal 之后会提高论文得分,则文章大概率会被接收。所以 rebuttal 对于论文是否接收来说有着举足轻重的作用。

之前,旷视南京研究院负责人魏秀参博士曾介绍了论文 rebuttal 那些事,为读者们提供全新的洞见。在本文中,佐治亚理工副教授兼 FAIR 研究科学家 Devi Parikh 和 Dhruv Batra,以及俄勒冈州立大学助理教授、担任 ICML 和 NeurIPS 2020 领域主席的 Stefan Lee 更详细地阐释了为何进行 rebuttal 以及审稿人和领域主席各自扮演什么角色,并根据自身经历为读者提供了 18 条实用的 rebuttal 小建议。

从左到右依次为 Devi Parikh、Dhruv Batra 和 Stefan Lee。

接下来先了解一下审稿人和领域主席(AC)在 rebuttal 中各自扮演的角色。

有的放矢,尽可能全面地准备 rebuttal 内容

一言以蔽之—「澄清」和「说服」是 rebuttal 的两大核心点。「科学」是一个十分严谨的过程,而「rebuttal」只是该过程中的一个环节。

MIT 电气工程与计算机科学系(EECS)教授、历任 ICCV 2005 和 CVPR 2013 程序委员会共同主席的 Bill Freeman 曾在 CVPR 2018 大会的一次演讲中谈到:通常情况下社区新成员会过于理想化同行的评审过程,他们普遍认为评审者们有很多时间,会被安排在一个安静的空间中,进而仔细审阅各类论文以及研究报告。

但现实情况远比想象的混乱,在评审过程中,不同的参与者都有不同的目标。同时,每个参与者都必须在有限的时间和注意力范围内评审论文,并且还需要承担多种责任。

因此,从这个角度出发,一方面要弄清楚 rebuttal 的目标对象是谁

rebuttal 的目标对象有两个:

1. 审稿人,他们会不同程度地阅读论文,但可能记不起一些细节,或者打从一开始就不理解论文的核心主题;

2.AC 可能对研究工作并不太熟悉,在这种情况下,最优的「指导原则」是假设他们所读的只是评论和 rebuttal 论点。

另一方面我们要「看人下菜碟」,针对审稿人和 AC 准备相应的 rebuttal 内容

1. 对于审稿人而言:尽最大可能澄清疑惑,回答问题,纠正可能产生的误解,避免过于明显的错误,并尽最大努力整合反馈意见改善现有的工作;

2. 对于 AC:提供有代表性的评论摘要,帮助他们了解审稿人提出的问题是否获得了解决,并呼吁进行 bad-faith 审核,帮助他们做出有效的决定。

根据以往的经验,学术界大多数的新成员都专注于(1),而忽略(2)。

最后,我们可以将「rebuttal」看作「辩论赛」。辩论赛中参赛者竭尽全力力图说服对手,在参加各类顶会时也是如此。虽然这个比喻并不完美,因为审稿人并不是我们的对手。但相同的是,我们都在尝试说服「辩论对手」或者「审稿人」以改变其想法。

四步走战略:稳扎稳打,轻松应对 rebuttal

  1. 逐句逐条地列出审稿人的评论以及意见,使用电子表格来整合每个审稿人提出的个人评论/问题/疑虑。将所有内容放在同一位置防止有任何遗漏的内容。尽快执行此操作,以便于意识到需要补充任何有必要的新实验(如果场所允许),也便于尽早进行分析;

  2. 头脑风暴:在总表上设一个专栏,供回复每个审稿人的评论。在此专栏里可以将自己的想法粗略地表达出来;

  3. 撰写「rebuttal」草案。将你在上述专栏中粗略的表达转化为 rebuttal 草案中的具体回应。注意简明扼要,同时覆盖每个要点,并在后续调整中进行删减/优先排序处理;

  4. 审查和修订。重读原始评论和你创建的反馈表,以确保所有对应的问题均已解决。当然,优先考虑主要问题,然后在合理空间内进行调整。

下图展示了一个原始回复示例:

18 条 rebuttal 小提示助你成功翻盘

关于 rebuttal,作者提供了以下 18 个他们认为有效的建议,大家可以参考借鉴。

提示 1:保持积极态度:进行审稿意见的总结,突出审稿人对论文的正面评价。rebuttal 内容则主要针对负面的评审反馈。

提示 2:确定优先级顺序,先解决评审中存在的最大问题,然后处理细枝末节的小问题。

提示 3:直接明了地回答审稿人提出的问题,紧扣问题的核心。回答的同时注意结合上下文,例如以下两则示例对话:

  1. 问:「这些是多次运行后反馈的平均值吗?」答:「没错,我们对 5 个随机原始值进行了平均。」

  2. 问:「训练期间是否使用了分割蒙版?」答:「没有,仅用于评估研究结果。」

提示 4:保持沟通状态,比如提示 3 的示例都是对话形式的。这可能会让 RAC 更容易接受,并且也不会显得那么「好斗」。

提示 5:回答问题的意图。不要纠结于问题本身,更要明白评论背后的意图。

例如,评审的问题是「为什么不在 GLORP3 上进行评估?」通常情况下可能会使您的研究实验受到部分质疑。你在回答时应指出自己已经对 X,Y 和 Z 进行了评估,这些就足够了。需要注意一点的是,提醒其他评审和 AC 进行广泛的实验评估是非常必要的。

提示 6:不要害怕去做一些强调。回答不仅要直截了当,还要有的放矢,突出重点。

提示 7:如果所有审稿人都忽略了你想表达的核心观点,那么你应该点拨一下帮助他们回顾一下。

提示 8:如果审稿人和 AC 不太记得你的论文,或者有可能他他们没有仔细阅读。你可以重新介绍一些关键词,并提醒他们有关实验的细节情况。

提示 9:如果审稿人问的内容在论文中已经呈现,那么以行/表格/图片的编号的形式反馈给他们,并在 rebuttal 中强调这一点。引用的主要目的是提醒审稿人和 AC 你的论文并不缺少重要细节。

提示 10:整合审稿人共同关注的问题。如果多个审稿人有共同关注的问题,可以一次性回复多个审稿人。

提示 11:让审稿人尽可能容易地发现与他们有关的回复。

提示 12:统计数据的说服力更强。相比于与审稿人和 AC 争论,提供给他们具体数据/统计资料更能支撑你的观点。

提示 13:说不如做。直接在 rebuttal 中解释一些词汇具体代表什么,然后再向论文中添加内容,这会让审稿人和 AC 相信你可以完善论文的细节。

提示 14:要善于接受意见同时保持理性。大多数审稿人和 AC 都欣赏这一点。同时,也要尝试他们建议的方法,看其是否有效,而不要争论其建议也可能无效。

提示 15:坦诚回应。审稿人可能提醒你再做一次实验,但如果真的无法完成,你可以直接回答「条件不允许」。总之,实话实说就行了。

提示 16:要特别关注不良审稿人。在一些情况下,审稿人可能没有坚持审阅的最佳实践或者没有认真对待自己审阅者的身份。这时确保其他审稿人意识到这点并适当地降低不良审稿人的审查比重是很重要的。指出不合理或缺乏根据的评论,并引用其他审稿人的反对意见都会有用。这也可以包括对领域主席提出保密请求(在适用情况下)。

提示 17:认可审稿人的努力。另一方面,如果审稿人有优化论文的想法或者其他建设性想法,要对此表示感谢。

提示 18:不要忘记对方的感受。请记住这不仅是科学活动,也是和其他人的社会交流。所以要找到自己与审稿人之间的共识,进而达成提高得分的最终目标。

原文链接:https://medium.com/@deviparikh/how-we-write-rebuttals-dc84742fece1

添加个人微信,备注:昵称-学校(公司)-方向,即可获得

1. 快速学习深度学习五件套资料

2. 进入高手如云DL&NLP交流群

记得备注呦

【科研】论文得分低、濒临被拒不要慌,18条rebuttal小贴士助你说服评审和AC相关推荐

  1. 搞科研论文看不懂咋办?

    科研文献浩如烟海,如何才能找到对自己有重要参考意义的文献,是每个科研工作者都必须要面对的课题,而从中弄懂其中的奥秘更是每个科研人都必须掌握的重中之重,今天我们就给大家带来了中英文文献检索.全文下载攻略 ...

  2. 科研论文投稿的那些事

    1.前言 撰写研究论文并付诸发表是一段异常艰苦的历程,且不说论文选题和研究实证面临的种种挑战,单从投稿经历反复修改的长期性和艰巨性来看,就已经是消磨意志的事情.然而即便经历过所有的磨难以后,稿件可能依 ...

  3. 研究生第一篇科研论文常犯问题总结

    ↑ 点击蓝字 关注视学算法 作者丨喻海良,中南大学教授,博士生导师 来源|http://blog.sciencenet.cn/blog-117889-1018759.html 极市导读 本文作者为中南 ...

  4. opengl用什么软件写_汇才论文工具分享:写科研论文的都在用这些截图软件

    截图是一种学问,经常混迹论坛的相信都知道,"饶老师教你截图"的梗.由于经常有网友不使用系统自带的截图功能非要发手机屏拍的图,导致像素过低看不清,于是渐渐就行成了一种吐槽的梗,常见于 ...

  5. wps两列数据分别作为xy轴_一图胜千字:科研论文插图/数据处理和图表制作学习会(2019年12月2729日 上海)...

    我是吸铁石,无论你多强大,只要你离我近,就会被磁化 放射技师考试资料独家整理历年真题.考点分析.名师讲解.影像资讯. 执业技师资格考试在路上,放射技师之路,你我同行. (全文共计1485字,预计阅读时 ...

  6. 【转】台湾教授-如何阅读科研论文

    [转]台湾教授-如何阅读科研论文 一.论文的要求 我对硕士论文的基本要求是: (1)论文的主要内容,是叙述一套方法在一个特定场合中的应用. (2)这套方法必须要有所创新或突破,并因而对学术界有所贡献. ...

  7. 如何写好科研论文 撰写技巧(三)

    科研论文 撰写技巧(三): [课程来源:清华大学 仲伟民教授 研究生课程 <如何撰写学术论文(文科)>] [说明:个人课程笔记,仅供参考] 前言: 撰写科研论文是研究生阶段最为重要的一种训 ...

  8. 如何写好科研论文(学习笔记2000字)

    如何写好科研论文(学习笔记2000字) 通过本课程的学习,我学习到了许多如何写好科研论文的方法,接下来我将具体阐述我的收获. 一.在第一章中,主要学习了如何造就一篇优秀的学术论文. (一)标题要起得好 ...

  9. 如何写好科研论文 | 讨论

    如何写好科研论文 | 讨论 如何写好科研论文 | 讨论 讨论1:如何去选取第一批要阅读的论文? 讨论2:如何从第一批阅读里选出自己想要进入的方向? 讨论3:如何在选定方向后扩展相关阅读? 讨论4:你认 ...

最新文章

  1. ASP.NET小收集:IFrame使用
  2. 一代传奇,“全球第一CEO”:杰克·韦尔奇逝世了!
  3. 提高Python程序运行效率三种模式第一种:多进程multiprocessing模块
  4. Html5学习笔记1 元素 标签 属性
  5. VBA代码执行过程中,显示程序的运行状态
  6. halcon学习之图像分割
  7. 批处理命令——for
  8. Android开发之软键盘遮盖EditText
  9. 德语区国家的摄影测量与遥感
  10. S7-300 PLC的一次系统故障
  11. python学习群发邮件
  12. 第二证券|扶持政策频发,教育板块再度爆发,全通教育“20cm”涨停
  13. 我的第一个安卓应用程序_我如何设计我的第一个应用程序
  14. 判断身份证:要么是15位,要么是18位,最后一位可以为字母,并写程序提出其中的年月日
  15. RTMP协议和RTSP协议的区别
  16. 【python--教程】python读写word文档
  17. linux备忘录课程设计,linux备忘录
  18. 美国政府否认“口头批准”超级高铁,然而马斯克没有任何损失
  19. 如何去掉Windows7开机那个烦人的360安全卫士提示窗口
  20. P2754 [CTSC1999] 家园

热门文章

  1. [UOJ]#36. 【清华集训2014】玛里苟斯 线性基+分类讨论
  2. 基础化工行业报告:国内盐湖提锂产业进程加速,产业链有望受益
  3. Grain: Improving Data Efficiency of Graph Neural Networks via Diversified Influence Maximization分析
  4. 【笔记】ARM架构和ARM芯片(三)
  5. 多元伯努利分布 multivariate bernoulli distribution
  6. 第十九讲 信息安全管理【2021年软考-高级信息系统项目管理师】
  7. 服务器为什么找不到抢先服,王者荣耀:抢先服新版本上线,新增多种内容,唯独没有李信消息!...
  8. Java CSS3:(七)CSS3 中常用的样式(跳动的心)
  9. 英语口语练习三十之听歌学口语:Boom Clap,你在我的世界里闪闪发光用法
  10. FLOOR PLAN学习