如何写学术论文的rebuttal
“A Simplified xxxxxxxxxxxxxxxxx for xxxxxx Systems”
by xxxxx, xxxx and xxxxx
Dear Reviewers:
We wish to thank you for the time and effort you have spent reviewing our paper. We are pleased to note that you have found our research work interesting and also pointed out some problems to help us improve the quality of our work.
Motivated by your comments, we have deeply reconsidered the architecture of our work and tried to fix all the problems you mentioned. In particular, this revised manuscript of our resubmitted letter has significantly been improved mainly as follows: (The improvements are in red in the revised letter for your convenience)
Improvement-1: xxxxxx.?
Improvement-2: xxxxxx?
Improvement-3: xxxxxx?
Improvement-4: xxxxxx
Improvement-5: xxxxxx
Our itemized response to your questions, comments and suggestions (repeated below in italics for your convenience) is as follows:
Reviewer #1
Reviewer comment
xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx
Our response:
Thank you for your comments. We have fixed the spelling errors as you mentioned xxxxxxxxxxxxx
--
It may be surprising that one can bound the average probability of error for a collection of communication systems when one cannot calculate the probability of error of an individual system.???? Such was Shannon's insight. ----- Principles of Communication Engineering
前面的各個回答已經說得很好了。我結合自己這次ICCV (2017)的經歷補充一下看法。
之前看到結果是borderline, weak reject, borderline的時候, 心都涼了。覺得這次肯定沒戲了,一個accept也沒有。自己當時心態上都有點破罐子破摔,rebuttal寫的比較隨便。但是
@啥都不會 學長還是很認真地一字一句幫我改,指導我應該補充哪些地方,強調哪些地方。最后rebuttal果然奏效,paper中了。而且reviewer對我們的rebuttal給了好評: “The authors provided a sufficient rebuttal to solve most of my concerns.” “Two of the three reviewers recommend accept as a poster and agree that the rebuttal addresses their concerns.”我覺得首先應該要認清reviewer的思路。
其實reviewer想拒你的理由,也不一定就是他給出的那些comments. 有時候可能就是做的東西不符合他的口味,就是想拒,但又找不出明顯的硬傷,然后就挑一堆有的沒的問題。讓這種reviewer改意見感覺挺難的,他心目中對你論文的看法早就定了。
我這次投的ICCV,給weak reject的那個reviewer就是這種情況。提的一些問題根本不在點上,基本沒有評論我的方法本身,凈挑一些dataset, evaluation metrics的問題,盡管我們用的dataset, evaluation metrics是大家普遍都在用的。這個reviewer到最后也沒修改意見,還是給了weak reject.
但其他兩個給borderline的reviewer,提的一些問題就靠譜了很多。有的確實是我們論文的問題。而且從一些話里也可以感受到他們的態度也是搖擺不定的,比如“some issues in the paper should be fixed before being fully accepted”. 遇到這種情況,就要果斷爭取。我們rebuttal主要就是盡可能地把這兩個reviewer的concerns解釋清楚。最后這兩個reviewer也修改了意見。
如果是論文沒寫好,比如遺漏了一些關鍵細節。大方承認,并且在rebuttal里面把這些細節展現出來,承諾在論文之后的版本會加上。
如果是reviewer對你的論文理解有問題,那就在rebuttal里面更加詳細地解釋。
如果確實指出了自己模型/實驗的一些瑕疵,可以強調自己論文的亮點和contribution. 比如有個reviewer說"the proposed method cannot beat other state of the arts", 我們可以強調我們并沒有像其他論文那樣用ensemble的方法來提升performance,我們的focus是XXX. 比起performance的一些細微提升,XXX更重要。
上面就是自己的一些經驗,分享給大家看看就好。可能也不一定正確,可能就是這次rebuttal我們運氣不錯而已。
最后祝大家都好運。
如果分數在安全區,rebuttal 就像上臺領獎。
審稿人你們說得真對,我們也是這樣想的,你們說的顧慮我會加進limitations里面,謝謝你們,你們真有眼光!
如果分數在borderline,目標是團結最可能改分的人以及AC。
比如某個審稿人是喜歡這個idea,但是覺得有個地方不夠好,可以花大篇幅解釋。一旦有一個審稿人改了分,AC就會感到壓力,會認真在pc meeting上討論這篇論文。
如果分數在低分區,而且是雙盲審,果斷開始有禮貌的撕逼 (別和AC撕,AC知道你是誰)。
報告AC, 審稿人A是sb,連 xxxx 都沒看懂。我要質疑他的水平。我真心要求換審稿人。
(親眼目睹了身邊一個小伙用這招把一篇 1.6/5 的論文argue進了某頂會。)
想起以前基友老板和基友說的話,
"You have nothing to lose in the rebuttal."
------
剛交了兩個rebuttal, 希望有好結果。
剛剛提交了ICCV final review,說一下自己的看法。
我很同意
@肖寒所說,很多時候reviewer的第一印象已經確定的情況下,rebuttal能夠改變的不多。只有這么幾種情況會比較有用:一個是的確reviewer弄錯了。例如reviewer說這個paper adhoc,可能算法本身并不adhoc,但因為他對于某些步驟沒有理解,或者看的時候直接忽略某些重要步驟,才會這么覺得。所以這個時候需要的是告訴reviewer他理解錯的地方,強調reviewer忽略的地方。
另外一個就是一篇paper的評分mix。有的人說accept,有的人說reject。一般內部reviewer之間都會進行一些討論,講講為什么要reject,為什么要accept,最后達成一致意見。這個時候rebuttal就可能很重要。因為rebuttal可以給想接受paper的reviewer更多的論據來證明這個工作的優點。例如,reviewer1對于這個paper有一些negative points(實驗不足,算法adhoc,novelty不足),而在rebuttal上你一定程度上解決這些問題(補充實驗,解釋算法合理性,解釋這篇工作和之前的區別),這時即使reviewer1依舊對于這篇工作持否定意見,其他reviewer(尤其是評分介于accept和reject之間的reviewer)也會覺得reviewer1提出的問題并不太嚴重,最后決定接受。
還有無論是否能夠改變reviewer意見,都建議提交rebuttal。reviewer畢竟花了很多時間閱讀和審核文章(即使有不負責任reviewer,很多人還是在認真review),也是很想知道author的想法。review&rebuttal不僅僅是審文章,reviewer和author一個交流的機會。
最后,不管reviewer意見是否正確,回復的語氣一定要平和。如果reviewer指出文章的問題的確正確,這個時候虛心接受就好,reviewer會欣賞你的謙遜的。強行在rebuttal中想把錯誤觀點掰回來往往會適得其反。先從CVPR,ICCV這樣的Rebuttal說起來吧,這里Rebuttal的任務是說服Reviewer。讓接收的Reviewer覺得自己做出了正確的選擇,敦促動搖的Reviewer走上人間正路,最后警告拒絕的Reviewer別走上與人民為敵的道路。
我現在的老板是本科法律系畢業的日本大小姐(對,你沒看錯我們組確實是做視覺和AI的。順便打個廣告,我們所處于東京黃金地段。歷史上,毫無背景的碩士或者博士生來我們這里三個月到六個月實習結束后都會發一篇頂會或者Journal,還有實習的碩士發了CVPR Best Student Paper后事了拂衣去,不留身與名的投入金融行業。歡迎大家來我們這里實習和攻讀學位), 一直教導我們仔細體察Reviewer的心意,弄明白Reviewer是在什么樣的心情下寫出Rebuttal的。
值得特別注意的Reviewer往往分成幾類:
1. 本行業的專家,能夠老道毒辣地指出論文的優缺點。這樣的專家往往會努力發現Paper中的優點,并且寬容戰狂啊不是一些瑕疵或者不足,甚至會明確地指出,雖然你極力掩飾,但是這個漏洞已經被我看出來了,不過煮不在乎,我還是愿意用錄用你,畢竟
一般的研究人員特別是剛入行的人,這樣的Reviewer往往是出于自保的心態。一般來說,Review的時候,在Rebttual之前是看不到其他人的意見,不過也有例外,比如今年的CVPR。。。。。那么經常會有其實Reviewer不太懂這個小領域的具體內容,但是他覺得我是有身份的呀,我不能不懂啊,于是這樣的Reviewer往往會給出boardline 或者Reject的判斷,再給一些不痛不癢的意見,正反兩方面都說一說。以防自己熱情洋溢地表揚半天,結果一看其他Reviewer說這玩意行不通或者早被做過了。到時被其他Reviewer,尤其是被知道自己是誰的AC當作大新聞批判一通。一旦能體會到這樣動搖的墻頭草心意,那么就可以重點爭取一下。首先想辦法增強增強這個Reviewer的信心,拉為我們的同志。比如我們會肯定Reviewer慧眼獨具,你說的的優點實在太對辣,你看其他Reviewer1,2,3 都特別同意你這個說法。然后再稍微威脅一下,說你講的缺點,或者是有點小小的誤解,或者是trivial,只是一個小小的瑕疵。你看你這樣拒絕掉我們是以一眚掩大德,當然我們會在Camera Ready里好好地澄清一下,所以請你,
我是一個小弱,目前為止只寫過一次rebuttal,是今年3月底的IJCAI-2017。文章一共分到4個審稿人,其中2個意見都比較好,第3個有點搖擺,第4個喪心病狂地寫了一頁半A4紙!我猜測這個人可能是小同行/area chair。關鍵是我的文章確實有問題,很大一部分是寫的不好,讓他覺得哪哪都有問題。
寫rebuttal的時候,目的就是:團結可能accept的,討好可能reject的,這個基本原則不能變。
我總結了一下自己的問題大概就是兩方面:沒說清楚的和沒實現的。于是就分開回答。
- 對于沒說清楚的,直接說“你的問題很好”,但是它是這個意思XXX
- 對于沒實現的,也就是文章可能的短板,說“你這個提議很好”,我們也在考慮增加這部分的實驗/做這部分的驗證,我們已經有一些初步結果了,但是由于篇幅所限沒有列出來。如果被接收了的話我們一定補上。(如果你確實有別的結果最好,沒有的話也可以,寫完rebuttal趕緊做)
還有一個問題是字數限制,當時給的限制是1500個字母(注意是character,不是word),也就是說,一個we就是2個,一個空格/標點都算一個!有沒有天理!
這時候就得惜字如金了,比如
- 能用簡寫的盡量用簡寫(例如experiment--exp.)
- 減少標點之間的空格
- 少用標點,不復雜的從句可以多一點
- 如果實在不行,只針對那些重要問題回答
提交完rebuttal以后,文章能不能中還是得看運氣。不過至少你抓住了這個好機會為你的文章進行有理有據地辯解,可以說是盡人事了。
結果:我的文章仍然被reject了(4-5-5-6,滿分10)。最后的meta review一點沒提我以為的創新點,說,雖然你在rebuttal里說你會改,但我們覺得你不可能改。。。很讓人不爽的是有一個審稿人直接在review里說我看完那個人(review最長的那個)的review后,“lowered my score”。哎,還是不夠硬啊!我的分數很有戲劇性,所有的評分項里,technical方面的都是6-8分,quality of writing都是4分!什么原因:寫的不好別人不懂!
鄭重地提醒大家:千萬要把文章寫清楚,讓人能看明白!這里的寫清楚并不是說沒有語病和錯別字什么的,這都太低級了。而是在邏輯上要能讓人接受,字里行間沒有硬傷。不然你真是想哭都沒有地方哭啊!
作者:王晉東不在家
鏈接:https://www.zhihu.com/question/32055996/answer/187612713
來源:知乎
著作權歸作者所有。商業轉載請聯系作者獲得授權,非商業轉載請注明出處。
總結
以上是生活随笔為你收集整理的如何写学术论文的rebuttal的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 影视剪辑,如何一个人自学短视频7天vlo
- 下一篇: 驱动力3.0,动力全开~