近日，由創(chuàng)新工場(chǎng)、搜狗、美團(tuán)點(diǎn)評(píng)、美圖公司聯(lián)合主辦的“2018 AI Challenger 全球 AI 挑戰(zhàn)賽”正式開賽。

AI Challenger 號(hào)稱是“中國(guó)版 ImageNet”，今年已經(jīng)是第二屆。本屆 AI Challenger 的主題為“用AI挑戰(zhàn)真實(shí)世界的問題”，整體獎(jiǎng)金規(guī)模達(dá)到 300 余萬人民幣。

在 2017 年的首屆大賽中，AI Challenger 發(fā)布了從百萬到千萬量級(jí)的 4 個(gè)數(shù)據(jù)集、6 個(gè)兼具學(xué)術(shù)前沿性和產(chǎn)業(yè)應(yīng)用價(jià)值的競(jìng)賽。在今年的 AI Challenger 大賽里，數(shù)據(jù)集規(guī)模進(jìn)一步擴(kuò)大，新增 10 余個(gè)高質(zhì)量數(shù)據(jù)集。

▌5 個(gè)主賽道 + 5 個(gè)實(shí)驗(yàn)賽道

今年比賽共有 5 個(gè)主賽道，5個(gè)實(shí)驗(yàn)賽道。其中，5 個(gè)主賽道的數(shù)據(jù)集包括：業(yè)界最大規(guī)模觀點(diǎn)型問題閱讀理解數(shù)據(jù)集、業(yè)界最大規(guī)模細(xì)粒度用戶評(píng)論情感分析數(shù)據(jù)集、業(yè)界最大規(guī)模英中文本機(jī)器翻譯、業(yè)內(nèi)首個(gè)多標(biāo)簽短視頻分類數(shù)據(jù)集、以及世界龐大、最復(fù)雜的自動(dòng)駕駛數(shù)據(jù)集。這 5 個(gè)主賽道的競(jìng)賽分別是：

觀點(diǎn)型問題閱讀理解競(jìng)賽：機(jī)器閱讀理解是讓機(jī)器讀懂人類語(yǔ)言、和人類更好交流互動(dòng)的重要領(lǐng)域。此技術(shù)可廣泛應(yīng)用于智能搜索、智能客服、智能音箱、語(yǔ)音控制等場(chǎng)景，用AI實(shí)現(xiàn)基于文字、語(yǔ)音的人機(jī)智能互動(dòng)。數(shù)據(jù)集包含 30 萬問題以及相關(guān)文章與答案的語(yǔ)料集合，為業(yè)界最大。

細(xì)粒度用戶評(píng)論情感分析競(jìng)賽：自然語(yǔ)言情感分析是機(jī)器理解人類表達(dá)和意圖的重要領(lǐng)域。此技術(shù)可廣泛應(yīng)用于零售、電商、餐飲、服務(wù)等用戶評(píng)價(jià)場(chǎng)景，用AI對(duì)用戶反饋進(jìn)行智能分析，監(jiān)測(cè)用戶喜好、滿意度等。數(shù)據(jù)集包含 15 萬條餐飲用戶評(píng)論、6 大類 20 個(gè)細(xì)粒度要素標(biāo)簽，為業(yè)界最大。

英中文本機(jī)器翻譯賽道競(jìng)賽：機(jī)器翻譯正越來越成為人們跨越語(yǔ)言障礙的重要工具，應(yīng)用于各種領(lǐng)域。數(shù)據(jù)集在 2017 年數(shù)據(jù)集的基礎(chǔ)上，總量達(dá)到 1300 萬句對(duì)，為業(yè)界最大；且其中具有上下文情景的中英雙語(yǔ)數(shù)據(jù)達(dá)到 300 萬句對(duì)，為機(jī)器翻譯的研究提供了更多探索空間。

短視頻實(shí)時(shí)分類賽道：近幾年發(fā)展極快的短視頻行業(yè)具有明顯的娛樂性和流行性，深受人們喜愛；基于短視頻機(jī)器分類的技術(shù)還可以廣泛用于視頻內(nèi)容分析、編輯與生產(chǎn)，監(jiān)控、安防等領(lǐng)域。數(shù)據(jù)集包含 20 萬條短視頻、涵蓋 63 類流行元素，為業(yè)內(nèi)首個(gè)多標(biāo)簽短視頻分類數(shù)據(jù)集。

無人駕駛視覺感知賽道：自動(dòng)駕駛技術(shù)即將改變我們的出行和生活方式。本次大賽的自動(dòng)駕駛競(jìng)賽采用了 UC Berkeley DeepDrive（BDD）2018 年最新發(fā)布的 BDD 100K 數(shù)據(jù)集，這是全世界最龐大、最復(fù)雜的自動(dòng)駕駛數(shù)據(jù)集，包含原始圖片 1.2 億張、標(biāo)注圖片 10 萬張，涵蓋多樣天氣和晝夜光照條件。

除 5 個(gè)主賽道之外，AI Challenger 2018 還開放 5 個(gè)實(shí)驗(yàn)賽道競(jìng)賽和相應(yīng)的數(shù)據(jù)集，包括基于北京氣象局3年氣象數(shù)據(jù)的天氣預(yù)報(bào)競(jìng)賽，世界上首個(gè)農(nóng)作物病害檢測(cè)競(jìng)賽和數(shù)據(jù)集，國(guó)內(nèi)首個(gè)眼底病變醫(yī)學(xué)圖像檢測(cè)競(jìng)賽和數(shù)據(jù)集，以 3D 虛擬圖像訓(xùn)練機(jī)器“認(rèn)識(shí)”真實(shí)世界物品的競(jìng)賽和數(shù)據(jù)集，讓機(jī)器借助輔助知識(shí)學(xué)習(xí)從未見過的新概念的首個(gè)國(guó)際性零樣本學(xué)習(xí)競(jìng)賽和數(shù)據(jù)集。

▌競(jìng)賽日程

AI Challenger 2018 的競(jìng)賽主要分為三個(gè)階段。第一階段比賽從 2018 年 8 月 29 日至 11 月 4 日，參賽隊(duì)基于訓(xùn)練集、驗(yàn)證集、測(cè)試集 A，進(jìn)行算法設(shè)計(jì)、模型訓(xùn)練及評(píng)估，并提交預(yù)測(cè)結(jié)果，系統(tǒng)會(huì)按照評(píng)測(cè)指標(biāo)實(shí)時(shí)反饋分?jǐn)?shù)，并更新榜單排名。個(gè)別競(jìng)賽采取參賽隊(duì)提交代碼、docker 的形式進(jìn)行比賽。期間進(jìn)行雙周賽排名和評(píng)獎(jiǎng)。

第二階段比賽從 2018 年 11 月 6 至 8 日，開放測(cè)試集 B；各競(jìng)賽提交結(jié)果的時(shí)限不同。結(jié)果提交后即進(jìn)入評(píng)分、排名、代碼驗(yàn)證環(huán)節(jié)，個(gè)別比賽還將考察參賽隊(duì)的算法運(yùn)行效率。參賽選手在測(cè)試集 B 上的預(yù)測(cè)結(jié)果表現(xiàn)，將作為進(jìn)入決賽的排名依據(jù)。

第三階段于 12 月 18、19 日進(jìn)行競(jìng)賽的總決賽答辯。