4000選手參賽,首屆「全國人工智慧大賽」初賽回顧
- 2019 年 12 月 18 日
- 筆記
全國人工智慧大賽(以下簡稱大賽)由深圳市人民政府設立於 2019 年 8 月。大賽由深圳市人民政府主辦,深圳市科創委、鵬城實驗室及科技部指導成立的新一代人工智慧產業技術創新戰略聯盟共同承辦,大賽立足國際視野,營造人工智慧創新創造氛圍,促進產業、學術、資本、人才等創新要素融合發展。
大賽以「AI 賦能視界」為主題,分為「AI+4K HDR」和「Person ReID」兩個賽項,每個賽項的總獎金池金額 268 萬,其中一等獎高達 100 萬,無疑是今年中國總獎金和一等獎金額最高的人工智慧賽事。
初賽概述
首屆「全國人工智慧大賽」自開啟報名以來,吸引了共計 4,253 人報名參賽。選手涵蓋各大著名高校和知名企業,來自全國 32 個省市自治區以及 12 個海外國家的選手踴躍參與報名,大賽影響力深遠。
初賽進程中選手在賽事討論區和大賽官方賽群中積極交流參賽經驗,推動了 CV 領域先進演算法的不斷更新和迭代。雙賽項共計完成了 16.3 K 次結果提交,優秀的演算法經驗在大賽中得以積累和沉澱。
初賽中期對優秀團隊進行了選手採訪和問卷調查,結果顯示選手參賽的滿意度普遍較高,並有選手表示本次比賽賽題與學術工業的研究熱點不謀而合,而且數據集具有真實性和廣泛性,在參賽過程中獲益匪淺。
為了營造更好的競賽交流氛圍,在初賽的各重要環節都相應籌辦了活動,如線上培訓、內容徵集、每周之星等,對其中有積極貢獻的選手都發放獎品進行鼓勵。
一、大賽報名情況
1.1 總體情況分析:
報名從 10 月 17 日開始,至 11 月 29 日截止,影片/視覺賽道的兩個賽項共計 4,253 人、3,017 支團隊報名。其中 AI+4K HDR 賽項共 1,601 人、1,082 支團隊,Person ReID 賽項共 2,652 人、1,935 支團隊。

1.2 深入分析:
- 1.2.1 報名情況分析:
初賽前半階段比後半階段報名更加踴躍,前半階段平均每日報名數約為 160 人,後半階段平均每日報名數約為 70 人。

大賽吸引了來自全國 23 個省、4 個直轄市、5 個自治區的選手參與,大賽影響力輻射全國。

另有 50 余名參賽選手分別來自英國,日本,新加坡,美國,韓國,馬來西亞,俄羅斯,德國,澳大利亞,義大利等總計 12 個海外國家。
- 1.2.2 報名選手資訊:
學生人數為 2,826 人,在職人數為 1,427 人

參加本次大賽的學生來自世界各地的合計 376 所高校,其中參賽人數最多的十所中國高校為浙江大學,清華大學,西安交大,中國科學院大學,西安電子科大,北京郵電大學,北京大學,哈爾濱工業大學,華南理工大學,北京航空航天大學。

參加本次大賽的在職人員共來自業界 800 余家公司,其中參賽人數最多的十所中國企業為華為、上汽、阿里巴巴、格靈深瞳、成都考拉悠然科技有限公司、中科院自動化所、成都索貝數碼科技有限公司、京東、百度、美團,同時,也有 13 支來自外企工作人員的團隊和 8 支由自由職業者組成的團隊參加了本次的比賽。

二、大賽初賽表現
2.1 總體情況分析
Person ReID 賽項:共 14.8 K 次有效提交,A 榜 Public 榜最高分 0.906 分,B 榜 Private 榜最高分 0.86 分。
AI+4K HDR 賽項: 共 1.5 K 次有效提交,Public 榜最高分 94.02 分,Private 榜最高分 88.87 分。
2.2 細項分析
- 2.2.1 總體的提交數:兩個賽道共計完成了 16.3 K 次提交

- 2.2.2 客觀評審總體情況
AI + 4K HDR 賽項:使用影片評價的行業標準評價指標 PSNR、SSIM、VMAF 進行綜合打分,歸一化並分配權重後進行客觀評審,綜合衡量影像與標籤影像的像素級一致性及結構相似度,同時考量影片主觀品質。
Person ReID 賽項:採用 ReID 領域標準評價指標 Rank1 和 mAP 進行綜合打分,最終客觀成績為兩者的加權和,綜合評價第一返回結果的準確率和前 200 個返回結果的平均精度的均值。
- 2.2.3 主觀評審情況
技術委員會專家和鵬城實驗室、騰訊影片、平安科技、雲天勵飛、創維集團、深圳廣電集團等單位專家構成評審組,進行大賽初賽的評審工作。
從賽事籌備之初,組委會就系統性的構建了完備的評審機制,技術委員會由該領域具有較高的理論水平和較豐富的實踐經驗專家組成。
大賽初賽主觀評審採用「通過/淘汰」制。每賽項分別有多名老師專門負責演算法/程式碼審核,對雙賽項初賽排名靠前團隊提交的主觀審核材料進行了嚴密的篩查,通過了解其演算法思路、程式碼實現等項目細節,判定其初賽客觀成績有效性。
AI+4K HDR 賽項還設置了嚴格的影片主觀品質審核環節。由多位行業內專家組成了主觀影片品質評審專家小組,對相關作品進行了多維度的影片品質審核,對作品中出現了畫面整體嚴重偏色、異常錯點、嚴重噪斑、異常色塊、扭曲、形變、邊緣及線條出現嚴重鋸齒等多種異常情況的團隊進行了剔除。
為了保證評審結果的可靠性和公平性,所有選手提交的主觀審核材料,都將至少由兩位不同的評審老師進行逐一評審。
若兩個評審組老師都認定為成績有效,作品成績為有效,通過評審;若兩個評審組老師都認定為成績無效,則作品成績無效;若兩個評審組老師對同一個作品出現不同評審結果,則會聯繫出題老師、選手進行作品資訊細節的確認、溝通,最終由會審環節最終判定成績是否有效。
同時,主觀評審也設計了回饋溝通機制。評審過程中若發現異常或者需要選手提供更多資訊、材料,評審老師直接聯繫競賽平台輔助聯繫相關選手,對相關情況進行核實和溝通,評審中可以從選手處得到及即時回饋,避免因為資訊不對稱而導致成績誤判的情況發生。
雙賽項專家會審後,最終篩除相關無效團隊後,雙賽項分別確定了初賽晉級的 100 支隊伍。
- 2.2.4 作品亮點分析
AI+4K HDR 賽項:排名靠前的團隊的基礎程式碼為 EDVR,並且在基礎模型之上引入了其他的網路結構和模組以更好地恢復高頻資訊,同時考慮到影片當中例如轉場的特性,對訓練數據與模型生成的結果進行了一定的預處理和後處理。
Person ReID 賽項:前排的選手的團隊工程結構清晰,在基礎模型之上採用多個模型融合的方法完成建模,並結合了全局與局部的多特徵,並對於根據數據集的特質採用如不同的數據增擴方式、損失函數的結合、網路結構的微調、訓練方式的變化等訓練技巧。
三、初賽亮點
3.1 大賽活動
初賽期間,為提升參賽選手的參與感和活躍度,大賽組委會為選手提供了一系列有針對性的運營活動,並通過郵件、站內信、賽群通知等高效觸達所有參賽隊伍,使參賽選手在初賽各階段都可以參與到大賽的競爭氛圍中。
- 3.1.1 大賽學習專欄
大賽組委會為大賽參賽選手特意開闢了電腦視覺領域的學習專欄,旨在為選手提供詳盡的學習資料,並引導選手不斷優化模型,提升參賽成績。
專欄內容緊扣賽題背景,主要分為賽道背景介紹、CV 領域賽題與數據集的展示、賽題經典方法介紹、賽題經典指標解讀四個主要方向,為參賽選手在電腦視覺領域的基礎學習提供了豐富的線上學習資源。
專欄內容也會隨賽事進程而定期更新,使選手在參賽過程中的每個階段都可以收穫具有強針對性的指導和建議,節約了他們搜集資訊與學習資料的時間,有效的提高了選手們的參賽水平與效率。
- 3.1.2 線上培訓活動
AI+4K HDR 賽項的線上培訓 & 直播活動於 11 月 9 日下午圓滿結束,由北大老師主講,為參賽選手深入講解人工智慧超分演算法/編解碼等核心技術/最新演算法模型/比賽攻略及答疑。
直播期間人氣峰值非常高,有 110 人提出問題並獲得老師的答疑。不僅直播課堂的氛圍很好,老師傾力為選手答疑,課程的錄播影片也已在各大公開課、影片網站上線,上線至今收到近 700 次的觀看。
- 3.1.3 有獎徵集活動
有獎徵集活動旨在徵集 CV 領域的高品質內容,促進選手間有創意的想法和思路的交流,並可以集中收錄在大賽專欄作為選手後期的學習資料。
有獎徵集活動共計 3 個階段,在剛結束的第一階段中,選手們集思廣益貢獻了 12 篇優秀內容,每篇內容的平均閱讀量高達 500 人次,構建了選手之間樂於分享的良好氛圍。
- 3.1.4 每周之星活動
為促進選手積極提交結果文件,從 2019/11/15 開始至初賽結束共 3 周時間, 大賽榜單排名前 50 的參賽隊伍都將獲得「每周之星」獎項,獎品為騰訊影片會員權益。
3.2 參賽選手採訪
初賽階段兩個賽項針對優秀選手都進行了詳盡的採訪,採訪內容囊括選手的參賽體驗和參賽思路的具體分享,希望以此作為參考,啟發更多選手去嘗試新思路,提升參賽成績。
AI+4K HDR 賽項
AI+4K HDR 賽項採訪了來自南京大學和香港理工大學的優秀團隊,兩支團隊針對人工智慧在 4K/高清影片處理方向的發展前景都表達了自己的看法。
「AI+4K HDR」賽項官網:
https://www.kesci.com/home/competition/5d84728ab1468c002ca1825a
Person ReID 賽項
Person ReID 賽項採訪了一支職業參賽團隊,隊員表示本次比賽的評比方式簡單,提交結果不限制框架,可以很好的提升大家的參賽體驗。受到此次大賽的賽題引導,選手也表示後期會更加關注 CV 領域先進技術的應用和落地,以及給生活生產帶來的實實在在收益。
「Person ReID」賽項官網:
https://www.kesci.com/home/competition/5d90401cd8fc4f002da8e7be
AI 大賽複賽已於 12 月 9 日中午 12:00 開啟,複賽時間為 2019 年 12 月 9 日中午 12:00 至 2020 年 1 月 3 日中午 12:00。相信接下來的複賽競爭將更加激烈,請大家密切關注大賽官網或者我們的相關主題報道,我們將第一時間為大家帶來大賽的最新消息,敬請關注。