AAAI 2021獨家爆料!錄取率21%、Oral取消、評審出現Bug、Reddit上驚現楊超越…

  • 2020 年 12 月 18 日
  • AI

作者 | 耳洞打三金

終於!在近萬人的翹首企盼下,AAAI 2021論文錄取結果在昨天傍晚(北京時間)公布:
本次AAAI 2021一共收到9034篇論文提交,其中有效審稿的只有7911篇,最終錄取的數量為1692篇,接收率為21.4%

圖1:AAAI 2021錄取郵件通知

1

AAAI 2021整體介紹

AAAI 的英文全稱是 Association for the Advance of Artificial Intelligence——美國人工智慧協會。該協會是人工智慧領域的主要學術組織之一,其主辦的年會也是人工智慧領域的國際頂級會議。在中國電腦學會的國際學術會議排名以及清華大學新發布的電腦科學推薦學術會議和期刊列表中,AAAI 均被列為人工智慧領域的 A 類頂級會議。

2021年的人工智慧頂級會議AAAI 2021(第 35 屆 )將於2月2日-2月9日首個全程線上舉辦。

以下是2010年-2021年十二年來AAAI大會的論文投稿量和接受率的統計圖,可以看出,無論是論文投稿量還是論文接受數量,今年都達到了一個新高,明年沖一衝,論文投稿量估計會破萬。
與此同時今年21%的論文接收率並不算低,反而比前兩年有所提高,相比IJCAI 2020百分十幾的錄取率更是高了很多。
圖註:AAAI歷年投稿總數、錄取總數和錄取率;圖源:Aminer
    

大會首次取消Oral評級

不同於以往AI高峰會的錄取通知郵件(有Oral、Spotlight等級劃分),如下圖所示:

今年的AAAI 2021錄取郵件通知則是沒有看到oral等級劃分,大家都很好奇為何沒有呢,難道是大會組委會偷懶還沒完成工作,過幾天再發?

對於這一問題,推特上有熱心網友問到了AAAI 2021大會程式主席Kevin:「感覺今年評審標準提高了,今年還會有oral或poster等級的劃分嗎?」

Kevin表示道:「今年沒有等級劃分了,將不會再有差異。」

遺憾的是Kevin沒有說為何取消了orar等評級劃分,但三金這裡大概有以下幾個猜測:

1、疫情原因:都是全程線上舉辦了,何來以往線下Oral的正式感和儀式感?Poster掛到哪裡去?

2、Oral、Spotlight等評級本身就具有主觀性,另外AAAI往年的Oral比例也都不低,且去年AAAI 2020評選的Oral論文品質遭到過吐槽…

3、大會組委會善解人意、審時度勢、勇於創新、破Oral唯、勇做AI高峰會新榜樣……

但是,不知道以後全球疫情徹底結束、AI高峰會恢復下線後,Oral評級是否還會回來,看官,您覺得呢?


3

程式主席獨家爆料

大會審稿人情況

據大會程式主席Kevin表示,本次AAAI 2021共有9492位PC成員、606位SPC成員、以及246位領域主席…… 

納尼?9492位程式主席??? 

 ┗|`O′|┛ 嗷~~!仔細分析了下這裡的C應該指的是committee(委員/成員)的意思。

審稿過程不易

Kevin表示:

每篇主track的第二階段的論文都至少收到3篇評審;超過93%的論文獲得4+分。每篇快速track論文都至少收到兩篇新的AAAI評審;超過95%的人獲得3+的評審。根據需要還徵集了其他專家評審,許多論文獲得了5條6條,甚至7條評審

每篇論文還接受了由SPC,AC或程式主席撰寫的meta-review。四位共同的程式主席獨立審核了每篇論文,並標記了數百篇論文進行深入審核,並在評審偏離AC建議時,去除AC影響,以使論文保持統一的標準。

這也是為什麼我們沒有在當天早些時候做出論文錄用決定的原因:我們花費大量時間單獨查看數千篇論文並處理各種極端情況。我敢肯定,你們中的一些人仍然會不同意錄用結果,但是我們竭盡所能公平對待每篇論文。

論文被接收或拒絕並不完全取決於分數

Kevin在論文錄用通知發出後表示:
決定不僅僅取決於分數。我們沒有使用數字臨界值來決定接收或拒絕。被拒絕的第二階段論文的平均分數在2.0到7.0之間,被接受的論文的平均分數在4.5到9.3之間。

Kevin隨即又解釋道:

為什麼分數並不重要?因為討論經常導致審稿人改變主意;在這種情況下,他們經常改變分數。在某些情況下,即使是與多數意見不同,論文也只能基於一位專家意見被接收或拒絕。

3

Microsoft CM疑似出現技術Bug

在Reddit上也有作者吐槽說Microsoft CMT出現技術問題,

「我們的兩名審稿人(給我們打分5分和2分)聲稱他們沒有看到我們論文的任何附錄或程式碼。

但是我們的程式碼和附錄顯然已經附上,其他兩位審稿人提到它們(附錄或程式碼)的clear&useful(給我們打分9和7)證明了這一點,它們在CMT中也很清晰可見。

這似乎是Microsoft CMT系統的技術問題,這非常不公平地使評審對我們產生了偏見。

如預期的那樣,我們與SPC聯繫..但是他們在這件事上幾乎沒有任何反應。

對於如此規模的會議來說,這真是荒謬,浪費了我們太多時間。」

對此,有網友回復說這可能不是技術問題,而是UI設計不合理。

納尼?難道是UI設計不合理導致評審看不到附錄或程式碼,那好得想辦法和作者、AC溝通回饋下不行嗎?

4

錄用通知前夜Reddit上驚現楊超越!

目前論文錄用結果已出,幾家歡喜幾家愁,但其實在錄用通知出來之前,搞AI的這群不論是學生還是老師,不論是本科生還是博士生,大都有一顆期待的、焦灼的心,畢竟大神只是少數,如果能中一篇A類高峰會還是能開心蠻久的:

心情會突然放鬆,緩解好幾個月的壓力,走路都哼著歌帶著風,一蹦一跳地充滿了自信。
再稍微慶祝一下,回家炒上幾個拿手的小菜,叫上三五好友,酌幾杯小酒;追個劇、看個番、逛個街、摟著npy去到電影院看個電影、等到晚上了自然是…接著回到實驗室看論文做實驗

時間回到一天多前,按照AAAI之前官網的顯示,大會應該在12月1日就應該發送錄取郵件通知,而直到12月2日,大會的另一位程式主席Mausam才在推特上發文稱還要等上幾個小時。

對此,有論文作者表示:「如果有任何延遲請讓我們知道,我好把時間用到別的地方去。」

另外還有網友表示:準備睡覺去了,希望郵件通知能趕到賽博朋克2077之前出來。

隨即有網友回復說「Hi Man,不要對賽博朋克2077的再次推遲有任何懷疑。」

Reddit上驚現楊超越!

還是在AAAI 2021錄取前夜,有熱心網友在Reddit上題為 「AAAI 2021 Paper Acceptance Result”的一條貼子下驚奇地發現了「Please Chaoyue Yang bless me」的字樣:

隨即就有一位外國網友問到:Chaoyue Yang 是神意思?

「她是中國的一位幸運女神」,有中國網友一本正經的回復到。

而在這之後,也不知道是中國友人還是外國友人都在帖子上面刷起來了:

Please Bless me!!!+1

Bless+10010

還有網友直呼這是文化輸出!

這樣的事情當然不只是發生在reddit上,在本土的QQ群上,有個AAAI 2021會議投稿450人匿名交流群:

在錄用通知出來之前,這個匿名群里,大家自然是也要「楊超越」起來:

         

大家還紛紛發圖道:

三金我在這裡小聲問道一下:那些中稿的,說話還算話嗎?

另外,大家對論文評審難免會有一些吐槽:

雛菊吐槽到審稿人似乎是一位不講武德的69歲老前輩?

百子蓮和長壽花兩朵花抱怨道有在後期冒出新的review,但是不給rebuttal進行回饋:

有一隻爬山虎表示道中了高峰會不能出去開會旅遊感到憋屈:

5

2020年 AAAI 大事件回顧

1、楊強教授擔任國際人工智慧大會AAAI 2021大會主席
據南京大學周志華教授今年初消息,微眾銀行首席人工智慧官楊強教授擔任國際人工智慧大會AAAI 2021大會主席。
楊強教授的此次任職亦是AAAI大會歷史上第二位大會主席,同時屬華人首次。
周志華教授在微博中提到,2020年前AAAI僅設程式委員會主席(Program Committe e chair),沒有大會主席( General chair)。由於近來投稿量劇增,為了使程式委員會主席能把精力集中在稿件學術品質把控上,2020年起才開始設置大會主席。
楊強教授是人工智慧業界的國際專家,在學術界和工業界做出了許多貢獻,尤其近些年為中國人工智慧和數據挖掘的發展做出了重要的貢獻。楊強教授是國際人工智慧界「遷移學習」(transfer learning)領域的發起人和帶頭人,同時也是國際「聯邦學習」(Federated Learning)的發起人之一及帶頭人
他於2013年7月當選為AAAI Fellow,這也使他成為第一位獲此殊榮的華人;之後又於2016年5月當選為AAAI執行委員會委員,是首位AAAI華人執委,2017年8月當選為國際人工智慧聯合會(IJCAI)理事會主席,是第一位擔任IJCAI理事會主席的華人科學家。
由此可見,擔任 AAAI 2021 大會主席,也是順理成章之事。


2、AAAI頒發第一屆百萬美元松鼠AI獎

2020年9月24日,麻省理工學院教授Regina Barzilay被宣布為AAAI松鼠AI獎的第一位獲得者,獎金100萬美元,該獎項旨在表彰她在癌症診斷和藥物合成方面的工作。
更多資訊請查看「在患癌倖存後,她因AI癌症研究獲得首屆AAAI百萬美元大獎」一文。
3、AAAI/ACM SIGAI博士學位論文獎
11月6日,AAAI和ACM SIGAI聯合發布了首個博士學位論文獎,麻省理工學院博士吳佳俊獲得了2019年AAAI/ACM SIGAI博士論文獎。
另外還有兩位博士獲得了runners-Up獎項,分別是畢業於喬治亞理工學院的Aishwarya Agrawal和畢業於愛丁堡大學的董力。
AAAI / ACM SIGAI博士學位論文獎由AAAI和ACM SIGAI聯合設立,以表彰和鼓勵人工智慧領域的博士生的出色研究和論文,提名者必須是ACM SIGAI成員和/或AAAI成員。該獎項將每年在AAAI上頒發,獲獎者將被邀請在大會上發表演講。

更多資訊請查看「首屆AAAI/ACM SIGAI博士論文獎公布,姚班學霸吳佳俊獲獎」一文。

網址鏈接://www.reddit.com/r/MachineLearning/comments/k3xycd/d_aaai_2021_paper_acceptance_result/

AAAI 2021 論文結果出爐以後,大家接下來就該期待今年各位的論文斬獲大獎吧!

另外如果各位有論文投稿報道需求,歡迎大家按照如下方式給AI科技評論聯繫!

暫時沒有投稿需求也可以先加上之後聯繫本文作者:

交個朋友聊聊天、也歡迎更多吐槽爆料和學術合作!


點擊「閱讀原文」,進入直播間預約,避免錯過精彩分享!