向線上出發：ICLR 2020的經驗談 | 翻譯徵文 | 雷鋒字幕組
從今天起，ICLR2020 年線上會議的所有內容都支持開放訪問，供世界各地的任何人學習。現在，線上會議網站的公共檔案館可以供大家瀏覽大會 2020 年的會議進程，並了解線上會議入口及其流程。已註冊的參會人員網站仍可以使用。
第八屆國際學習表徵大會（ICLR 2020）的舉辦是非常具有挑戰性的，但最終，組委會還是收穫頗豐。我們最初在埃塞俄比亞舉辦會議的工作已經完成了許多，但後來新冠（COVID-19）大流行給了我們一個機會，讓我們創造了一種新的會議舉辦方式。現在回顧這一周的線上會議，我們很滿意，因為我們能夠證明線上會議是分享科學和打造國際機器學習社區的可行方式，並且許多有意義的連接通道已經成為了可能。
感謝大家在這個充滿變革與探索的時代里給予我們支持、耐心和善意。我們感謝作者，感謝研討會和社交活動的組織者，感謝我們的志願者，以及每一位報名參加的人。在你們的共同努力下，ICLR2020 得以實現，並取得了成功。
我們知道，要為大家創造更好的線上會議體驗，還有很多事情要做。我們希望這第一次線上會議是一次值得共同發揚光大的會議。為實現這一目標，本文總結了我們對 ICLR2020 線上會議在設計和體驗上的一些重要反思。
- 註冊人數 5622 人
- 涉及國家 89 個
- 發言者 1336 人
- 每篇論文單頁平均瀏覽量 200
- 總頁數瀏覽量 100W+
- 互動信息 10W+
- 視頻觀看量 10W+
- 贊助商展位平均滯留時間 10 分鐘
設計原則
我們在處理線上會議的方法中採用了兩個關鍵原則——包容性和互動性。每當我們發現自己需要做出困難的決定或在相互競爭的方法之間做出取捨時，我們就會回到這些原則。這些原則對我們意味着什麼？
包容性
- 異步先行。會議必須不受時區限制，以便每個人都能在健康的工作時間內參加會議。這意味着會議必須以異步為先，這樣大家都不需要在非正常時間起床，每個人都可以創建自己的活動流程，補上錯過的東西，或者根據需要提前跳過。
- 延展直播會議。直播部分必須儘可能均勻地分佈在世界各地。為此，我們每天在全球各地的時區舉辦 5 場海報會議，每篇論文都會（在 2 個不同的會議）展示兩次。
- 在全球範圍內都可參加。會議的所有部分必須在全球範圍內都可以訪問。這意味着我們不能使用只在某些國家使用的工具和服務，我們需要找到簡單的方法來克服任何限制。
- 低成本。參會成本不應該成為障礙。我們提供了一些免費註冊的機會，並將費用降到儘可能低的程度，同時仍讓收入能夠支付所需的服務費用。
互動性
- 聊天無處不在。我們需要支持儘可能多的互動形式。結合包容性原則，這意味着會議的每個組成部分都有一個與之相關的聊天頻道，以實現異步、直接和開放的對話。
- 面對面的對話。海報會議是通過視頻通話進行的，每篇論文分享兩次。我們還為每一位主旨演講者舉辦了一個額外的的現場問答，讓更多的人可以直接向我們的演講者提問。
- 社交化。我們要求舉辦社交聚會，讓大家圍繞着共同的興趣和主題進行聚會。
- 自組織。我們希望有直接的和即興的互動方式的機會。我們嘗試過即時指導會議、臨時會議和重複社交活動。
經驗和建議
我們在 6 周的時間內把整個線上會議召集在一起，所以我們發現很多問題都可以通過更多的討論和時間來解決。總的來說，我們相信用這種方式來舉辦線上機器學習會議，實現了我們所有的目標。我們在這裡分享一些反思和需要改進的地方。
組織和交流
- 早期的溝通。虛擬形式是一種新的形式，需要在前期做大量的安排工作。如果能夠提前小範圍溝通，可以幫助消除困惑，建立起對虛擬形式的了解，幫助大家對這種新形式有更多的準備。
- 費用和獎學金。虛擬形式為包容性開闢了新的途徑，這意味着我們必須支持參與的計劃需要相應地增加。他們需要清晰、容易找到，並留出時間來申請。我們確實通過我們的志願者支持了很多免費註冊，通過我們的社區小組提供額外的註冊支持。開誠布公的講，多種渠道進行宣傳，這將幫助這些項目更好地觸達需要他們的人。
- 志願者。我們有 500 名志願者，他們是我們這次會議的一大亮點。我們的志願者們精力充沛，分佈在世界各地，致力於改善大家的虛擬體驗。我們為志願者提供免費註冊，來換取他們對會議不同職能的支持。志願者們可以提前進入會議，並幫助我們對系統的各方面進行壓力測試。在整個會議期間，他們是一個隨叫隨到的幫助小組，幫助任何有技術問題或困難的人。志願者項目是我們強烈推薦的一個項目。
- 參會率和參與度。我們的參會人數比我們預期的要多。2019 年的線下會議有 2700 人蔘會，2020 年的線上會議有 5600 人蔘會。很可能是，沒有線下會議的資金和簽證限制，使得更多的人能夠參加其中。這個數字仍然非常可控，因為不同時區之間的互動是異步的。在任何時候，可能有 200-300 人參與到一個活動中來。我們還懷疑參與度有偏差，有些人參加了很多活動，而有些人很少出席。我們懷疑有些人沒有全程參與，因為他們沒有請假，或是他們在家裡而不是在專門的實體空間參與活動有困難。為了更好地參與虛擬活動，需要在參與方面進行文化轉變。
會議組成部分
- 預先錄製的視頻。所有的講座都是預先錄製的，並在會議開始時提供。在答疑之前，大家可以觀看應邀參加的講座並討論問題(以及在答疑之前對問題進行投票)，這使得答疑環節的參與度和信息量都很高。每篇論文都有 5 分鐘的簡短視頻，這對於了解論文的主要信息也很有幫助。所有視頻的質量都出乎意料的好，錄製系統簡單易用。
- 海報作業。作業總體上是可行的，我們在作者的需求和各地活動的可用性之間取得了很好的平衡。如果能有更多的時間，就能避免作者們時間要求上的缺失和錯誤，也讓我們可以和作者們一起迭代安排。
- 海報的互動性。通過視頻完成的海報會議需要與線下會議上所慣用的方式不同。有一種活力的缺失，而這種活力通常來自演講者和與會者分享。演講者與聽眾脫節，不知道有多少人在參與他們的海報/視頻。參與者不願意加入呼叫，也不願意成為唯一的人，有一種壓力感，要麼是閱讀過論文，要麼是有見解或 “智慧 “的問題。這也是未來最需要迭代的地方，通過找到一種方式，讓作者看到自己的視頻的觀看次數、已經有多少人在視頻 call 上，以及在其他創意的虛擬環境中，這才是未來最需要迭代的地方。但這也需要大家改變對海報會議工作方式的觀念，也是需要大家在適應這些新的參與形式後，不斷發展的。
- 演講者問答。演講者問答環節的效果如願以償：這讓我們能夠與演講者進行更有意義的交流，通過多種提問途徑減少了提問的障礙，並讓更多的人提出問題。更棒的是，我們的許多演講者在會議結束後還加入了他們的聊天環節，並在聊天中繼續回答問題（有一次超過一個多小時）。直播會議的時間是為了方便演講者而選擇的，但這些會議的視頻在之後馬上就可以看到，所以錯過直播的人可以隨時觀看。
- 研討會。研討會的設計難度較大。它們需要技術團隊和主席之間進行大量的協調。我們還需要與各個研討會的組織者進行更多的溝通，他們需要提供研討會的時間安排、演講者的詳細信息，幫助建立起對技術工具集和流程、網站需求等方面的理解。在未來，這需要一個稍大一點的主席團隊，以及其他技術工具，讓研討會組織者可以對主會議網站的組件進行定製，供他們自己使用。
互動性和社交化
- 社交活動的地域分佈。我們呼籲舉辦線上聚會，並得到會議的支持，最終在整個一周內舉辦了 29 場社交活動。一系列社交活動沒有像我們希望的那樣分佈在全球各地，更有針對性的輻射範圍將使我們能夠支持分佈在世界各地的社交活動。主題的覆蓋面也不完整；同樣，如果有更多的時間，我們很可能會對社交活動的特定主題進行徵集，以促進與會者之間的互動。
- 更多的互動性。我們發現，小組通過聊天的方式自發組織了話題見面會。此外，還出現了一個由社區驅動的導師計劃，在這個計劃中，更有經驗的研究人員會通過視頻聊天回答年輕研究人員關於研究問題和職業發展方向的問題。未來的改進措施可以是預先安排視頻見面會（隨機或按興趣匹配，如神經匹配方法），並將這種導師輔導作為會議計劃的一部分，在整個會議周內進行。未來我們還可以創建常設的線上咖啡會，並探索其他的互動方式。我們嘗試的另一個互動部分是 ICLRTown，這是一個讓與會者在線上環境中相互交流的虛擬環境，用戶量不大，但得到了積極的反響。
技術系統和支持
- 聊天，視頻，預錄視頻。我們選擇的工具都是可以控制數據和使用的，可以在全球範圍內的任何地方工作的工具，如果可能的話，這些工具都是開源項目，並且可以簡單地集成到我們的系統中。我們在使用 SlidesLive、Rocket.Chat 和 Zoom 來滿足這些需求時沒有遇到任何問題，並且會再次使用它們。
- 單點登錄。將技術系統減少到單點登錄，可以讓大家的體驗更簡單、更方便。此外，這將使我們能夠實現更多的安全和隱私方面的功能。
- 網站開發。我們在很早的時候就發現，沒有一個能將我們所需要的不同工具結合在一起的門戶網站。我們探索了一些可用的平台，但決定自建這個平台，可以最好地服務於我們的會議文化和需求。這意味着我們的團隊成員將承擔起技術開發的重擔。今後，我們需要核心團隊的一部分網站開發人員，並承擔起這個重擔。
- 隨時的支持。我們的志願者全天候的在全球範圍內提供即時的支持，通過#helpdesk 頻道為參與者提供支持，效果非常好。會議期間，由於作者們公開分享了他們的鏈接，因此發生了兩起 “ZOOM 癱瘓 “事件。解決這個問題需要更多隨叫隨到的支持，以便能夠創建新的視頻鏈接並在整個網站上更新。未來還需要通過整個社區的共同責任和其他技術工具來防止這種情況的發生，也需要開發其他方式。
- 機器學習在會議的設計中。在有意義的地方，我們希望在會議方案和體驗本身的設計中使用機器學習。我們使用了一個隱變量模型進行審稿評分校準，使用視覺模型從每篇論文中提取縮略圖用於網絡上，使用自然語言工具將相關論文可視化，並使用推薦系統為論文和與會者創建一組平衡的推薦集。線上會議創造了一個新的環境，我們可以在其中嘗試和探索會議本身所展示的許多機器學習方法。
為 ICLR 2021 做準備
- 祝賀：我們向 ICLR 2021 項目主席致以最好的祝願和祝賀：Katja Hofmann (高級項目主席)、Alice Oh、Ivan Titov 和 Naila Murray。
- 成為 ICLR 2021 審稿人：如果你以前沒有參加過 ICLR 的審稿，並希望被考慮成為下一輪的審稿人或地區主席，請填寫以下簡短的表格：//surveymonkey.co.uk/r/QFBT67V
- 下一輪截止日期：下一輪截止日期是 2020 年 10 月初，會議定在 2021 年 5 月的第一周。是否線上進行，待定。
各位 ICLR 2020 組委會的代表們，簽名
Sasha Rush 和 Shakir Mohamed(總主席和高級項目主席)；Dawn Song、Kyunghyun Cho、Martha White(項目主席)；Asja Fischer 和 Gabriel Synnaeve(研討會主席)；Adam White(社交主席)、Hendrik Strobelt(線上主席)；Anima Anandkumar 和 Kevin Swersky(多樣性主席)；Andrea Brown 和 Lee Campbell(ICLR 秘書)，以及 ICLR 董事會。
現在，我們將在會議中休息一段時間，並聆聽 Drake 的Started from the Bottom。感謝大家在這個不確定的時期給予我們的支持。我們在寫這篇文章的同時，也在為下一屆委員會收集最後的筆記。Started from the Bottom
