AAAI 2021獨家爆料!錄取率21%、Oral取消、評審出現Bug、Reddit上驚現楊超越…
- 2020 年 12 月 18 日
- AI
作者 | 耳洞打三金
本次AAAI 2021一共收到9034篇論文提交,其中有效審稿的只有7911篇,最終錄取的數量為1692篇,接收率為21.4%。
圖1:AAAI 2021錄取郵件通知
AAAI 2021整體介紹
AAAI 的英文全稱是 Association for the Advance of Artificial Intelligence——美國人工智慧協會。該協會是人工智慧領域的主要學術組織之一,其主辦的年會也是人工智慧領域的國際頂級會議。在中國電腦學會的國際學術會議排名以及清華大學新發布的電腦科學推薦學術會議和期刊列表中,AAAI 均被列為人工智慧領域的 A 類頂級會議。
2021年的人工智慧頂級會議AAAI 2021(第 35 屆 )將於2月2日-2月9日首個全程線上舉辦。

大會首次取消Oral評級
不同於以往AI高峰會的錄取通知郵件(有Oral、Spotlight等級劃分),如下圖所示:
今年的AAAI 2021錄取郵件通知則是沒有看到oral等級劃分,大家都很好奇為何沒有呢,難道是大會組委會偷懶還沒完成工作,過幾天再發?
對於這一問題,推特上有熱心網友問到了AAAI 2021大會程式主席Kevin:「感覺今年評審標準提高了,今年還會有oral或poster等級的劃分嗎?」
Kevin表示道:「今年沒有等級劃分了,將不會再有差異。」
遺憾的是Kevin沒有說為何取消了orar等評級劃分,但三金這裡大概有以下幾個猜測:
1、疫情原因:都是全程線上舉辦了,何來以往線下Oral的正式感和儀式感?Poster掛到哪裡去?
2、Oral、Spotlight等評級本身就具有主觀性,另外AAAI往年的Oral比例也都不低,且去年AAAI 2020評選的Oral論文品質遭到過吐槽…
3、大會組委會善解人意、審時度勢、勇於創新、破Oral唯、勇做AI高峰會新榜樣……
但是,不知道以後全球疫情徹底結束、AI高峰會恢復下線後,Oral評級是否還會回來,看官,您覺得呢?
程式主席獨家爆料
大會審稿人情況
據大會程式主席Kevin表示,本次AAAI 2021共有9492位PC成員、606位SPC成員、以及246位領域主席……
納尼?有9492位程式主席???
┗|`O′|┛ 嗷~~!仔細分析了下這裡的C應該指的是committee(委員/成員)的意思。
審稿過程不易
Kevin表示:
每篇主track的第二階段的論文都至少收到3篇評審;超過93%的論文獲得4+分。每篇快速track論文都至少收到兩篇新的AAAI評審;超過95%的人獲得3+的評審。根據需要還徵集了其他專家評審,許多論文獲得了5條6條,甚至7條評審。
每篇論文還接受了由SPC,AC或程式主席撰寫的meta-review。四位共同的程式主席獨立審核了每篇論文,並標記了數百篇論文進行深入審核,並在評審偏離AC建議時,去除AC影響,以使論文保持統一的標準。
這也是為什麼我們沒有在當天早些時候做出論文錄用決定的原因:我們花費大量時間單獨查看數千篇論文並處理各種極端情況。我敢肯定,你們中的一些人仍然會不同意錄用結果,但是我們竭盡所能公平對待每篇論文。
論文被接收或拒絕並不完全取決於分數
決定不僅僅取決於分數。我們沒有使用數字臨界值來決定接收或拒絕。被拒絕的第二階段論文的平均分數在2.0到7.0之間,被接受的論文的平均分數在4.5到9.3之間。
Kevin隨即又解釋道:
為什麼分數並不重要?因為討論經常導致審稿人改變主意;在這種情況下,他們經常改變分數。在某些情況下,即使是與多數意見不同,論文也只能基於一位專家意見被接收或拒絕。
Microsoft CM疑似出現技術Bug
在Reddit上也有作者吐槽說Microsoft CMT出現技術問題,
「我們的兩名審稿人(給我們打分5分和2分)聲稱他們沒有看到我們論文的任何附錄或程式碼。
但是我們的程式碼和附錄顯然已經附上,其他兩位審稿人提到它們(附錄或程式碼)的clear&useful(給我們打分9和7)證明了這一點,它們在CMT中也很清晰可見。
這似乎是Microsoft CMT系統的技術問題,這非常不公平地使評審對我們產生了偏見。
如預期的那樣,我們與SPC聯繫..但是他們在這件事上幾乎沒有任何反應。
對於如此規模的會議來說,這真是荒謬,浪費了我們太多時間。」
對此,有網友回復說這可能不是技術問題,而是UI設計不合理。
納尼?難道是UI設計不合理導致評審看不到附錄或程式碼,那好得想辦法和作者、AC溝通回饋下不行嗎?
錄用通知前夜Reddit上驚現楊超越!
目前論文錄用結果已出,幾家歡喜幾家愁,但其實在錄用通知出來之前,搞AI的這群不論是學生還是老師,不論是本科生還是博士生,大都有一顆期待的、焦灼的心,畢竟大神只是少數,如果能中一篇A類高峰會還是能開心蠻久的:
心情會突然放鬆,緩解好幾個月的壓力,走路都哼著歌帶著風,一蹦一跳地充滿了自信。 再稍微慶祝一下,回家炒上幾個拿手的小菜,叫上三五好友,酌幾杯小酒;追個劇、看個番、逛個街、摟著npy去到電影院看個電影、等到晚上了自然是…接著回到實驗室看論文做實驗?
時間回到一天多前,按照AAAI之前官網的顯示,大會應該在12月1日就應該發送錄取郵件通知,而直到12月2日,大會的另一位程式主席Mausam才在推特上發文稱還要等上幾個小時。
對此,有論文作者表示:「如果有任何延遲請讓我們知道,我好把時間用到別的地方去。」
Reddit上驚現楊超越!
還是在AAAI 2021錄取前夜,有熱心網友在Reddit上題為 「AAAI 2021 Paper Acceptance Result”的一條貼子下驚奇地發現了「Please Chaoyue Yang bless me」的字樣:
隨即就有一位外國網友問到:Chaoyue Yang 是神意思?
「她是中國的一位幸運女神」,有中國網友一本正經的回復到。
而在這之後,也不知道是中國友人還是外國友人都在帖子上面刷起來了:
Please Bless me!!!+1
Bless+10010
還有網友直呼這是文化輸出!
這樣的事情當然不只是發生在reddit上,在本土的QQ群上,有個AAAI 2021會議投稿450人匿名交流群:
在錄用通知出來之前,這個匿名群里,大家自然是也要「楊超越」起來:
大家還紛紛發圖道:
三金我在這裡小聲問道一下:那些中稿的,說話還算話嗎?
另外,大家對論文評審難免會有一些吐槽:
雛菊吐槽到審稿人似乎是一位不講武德的69歲老前輩?
百子蓮和長壽花兩朵花抱怨道有在後期冒出新的review,但是不給rebuttal進行回饋:
2020年 AAAI 大事件回顧


2、AAAI頒發第一屆百萬美元松鼠AI獎


更多資訊請查看「首屆AAAI/ACM SIGAI博士論文獎公布,姚班學霸吳佳俊獲獎」一文。
網址鏈接://www.reddit.com/r/MachineLearning/comments/k3xycd/d_aaai_2021_paper_acceptance_result/
另外如果各位有論文投稿報道需求,歡迎大家按照如下方式給AI科技評論聯繫!
暫時沒有投稿需求也可以先加上之後聯繫本文作者:
交個朋友聊聊天、也歡迎更多吐槽爆料和學術合作!