盤點數(shù)據(jù)競賽二十年：《數(shù)據(jù)競賽白皮書》發(fā)布

　 阿里云優(yōu)惠券 先領(lǐng)券再下單

近日，中國乃至全球的第一份《數(shù)據(jù)競賽白皮書》(以下簡稱“白皮書”)發(fā)布，首次為我們從全局的角度盤點了數(shù)據(jù)競賽的發(fā)展歷程、現(xiàn)狀以及價值。白皮書指導單位為“大數(shù)據(jù)系統(tǒng)軟件國家工程實驗室”，和鯨科技攜旗下第三方數(shù)據(jù)競賽平臺和鯨社區(qū)(Kesci)，聯(lián)合AWS共同發(fā)布。

據(jù)發(fā)布方的信息顯示，白皮書通過搜集整理1000場全球競賽數(shù)據(jù)、1000余份問卷調(diào)研、幾十位行業(yè)專家及企業(yè)辦賽負責人的訪談、超過1200小時的分析研究，共同打造并發(fā)布了《數(shù)據(jù)競賽白皮書》(以下簡稱“白皮書”)。白皮書分為《數(shù)據(jù)競賽白皮書·上篇·1000場競賽的深度分析》和《數(shù)據(jù)競賽白皮書·下篇·辦好一場競賽的實操手冊》兩部分。

《數(shù)據(jù)競賽白皮書·上篇·1000場競賽的深度分析》中指出，數(shù)據(jù)競賽的發(fā)展起點可追溯至 1997 年首次問世的 KDD Cup，由國際頂會KDD 牽頭舉辦，這也是數(shù)據(jù)科學領(lǐng)域迄今為止最重要的國際賽事之一，至今已經(jīng)舉辦22年。

今天，就讓我們跟著白皮書一起，回顧一下這二十多年數(shù)據(jù)競賽與國際頂會的歷程吧。

2019年夏天有件令人驚喜的事件傳遍了全國——KDD CUP 2019三個賽道的冠軍全都被華人面孔拿下。被譽為數(shù)據(jù)挖掘領(lǐng)域「奧運會」的 KDD CUP，從1997年到現(xiàn)在已經(jīng)舉辦了22屆，是目前數(shù)據(jù)挖掘領(lǐng)域最有影響力的賽事。也是從今年開始開始， KDD CUP 擁有了專屬的獨立議程，供世界數(shù)據(jù)挖掘界的頂尖專家、學者、工程師、學生等前來參賽，在KDD中的分量越來越重要。

K D D(Conference on KnowledgeDiscovery and Data Mining，知識發(fā)現(xiàn)和數(shù)據(jù)挖掘會議)隸屬于 ACM(Association forComputing Machinery，國際計算機學會)，是響譽全球的頂級學術(shù)會議。1997 年， KDD 正式推出 KDD Cup，KDD Cup 要求參賽者通過數(shù)據(jù)分析，判斷出哪些人有可能成為美國癱瘓退伍軍人協(xié)會的捐贈者，從而幫助協(xié)會更精準地發(fā)送求助郵件，開啟了數(shù)據(jù)競賽的新模式。此后，KDD Cup 保持了一年一度的舉辦慣例。

1999 年KDD Cup 的賽題更為經(jīng)典，選用了來自美國國防部高級規(guī)劃署在 MIT 林肯實驗室操作進行的入侵檢測評估項目數(shù)據(jù)，希望參賽者能夠分辨那些操作是外部入侵，獲勝者是廣為人知的統(tǒng)計分析軟件公司 SAS。作為數(shù)據(jù)挖掘領(lǐng)域影響力最廣、水平最高的國際頂級賽事，KDD Cup 20 余年以來的賽題設(shè)計始終帶有鮮明的工業(yè)應用色彩，每年都會吸引大量優(yōu)秀的企業(yè)、高?；蚩蒲袡C構(gòu)協(xié)辦賽事，或直接參給與競賽角逐。

通過KDD Cup 的歷年成果上不難看出，雖然面臨的問題日益復雜，但始終帶有強烈的工業(yè)應用色彩，高度契合各類組織機構(gòu)的實際需求，不斷涌現(xiàn)出全新的應用場景。KDD Cup的成功，帶動了ICCV、NeurlPS、ISBI、Euro CSS、ECML-PKDD、VoxCeleb、MICCAI、C-MIMI、IEEE-CIS、CVPR(ActivityNet)、IWCS、ECCV 等國際頂尖學術(shù)會議紛紛加入這一浪潮。

他們除了在世界不同地域舉行年度性盛會外，也開始聯(lián)手全球各地的企業(yè)、科研機構(gòu)共同籌辦數(shù)據(jù)競賽，以短時間競賽的形式幫助前沿數(shù)據(jù)科學技術(shù)的進一步發(fā)展。這類享有頂會權(quán)威背書和國際影響力的重大賽事在全球范圍內(nèi)得到了積極響應，參賽對象不僅限于技術(shù)水平突出的個人，還囊括了科研實驗室、高校和企業(yè)等一系列組織。

國際頂會數(shù)據(jù)競賽也往往會積極兼顧市場應用的需求，通過與企業(yè)、政府機構(gòu)合作，聚集當下技術(shù)與數(shù)據(jù)應用中的難點尋求解決思路， 不斷縮短科研成果與落地應用之間的距離，賽題內(nèi)容廣泛覆蓋醫(yī)療、軍事、互聯(lián)網(wǎng)、交通出行、快消零售、生態(tài)及文化保護等眾多場景。

中國企業(yè)、高校及科研機構(gòu)和個人參賽者在國際頂會數(shù)據(jù)競賽的獲獎次數(shù)呈現(xiàn)逐年上升的趨勢，亦反應了中國在數(shù)據(jù)科學領(lǐng)域的實力和影響力不斷加強。在中國也有一些企業(yè)開始和國際頂會合作，舉辦基于行業(yè)應用的數(shù)據(jù)競賽。而數(shù)據(jù)競賽的進程也伴隨著人工智能相關(guān)科技專利的爆發(fā)期，從2000年開始不斷向上。

根據(jù)麥肯錫全球研究院發(fā)布的 MGI 行業(yè)數(shù)字化指數(shù)報告，在產(chǎn)業(yè)數(shù)字化動態(tài)發(fā)展的過程中，完備的數(shù)字資產(chǎn)積累、充分的資本投入與研發(fā)、可持續(xù)的人才連接與協(xié)同推進了產(chǎn)業(yè)數(shù)字化程度的不斷加深，進而帶來了較高的平均利潤增長率以及勞動增長率。

《數(shù)據(jù)競賽白皮書》中提到，通過數(shù)據(jù)競賽形式并以此建立基于數(shù)據(jù)價值流動的生態(tài)系統(tǒng)，才能充分利用生態(tài)內(nèi)不斷升級的人才資源和技術(shù)資源賦能商業(yè)發(fā)展，已成為越來越多商業(yè)領(lǐng)袖的共識。相較于傳統(tǒng)的數(shù)字化進程，主動采用數(shù)字化戰(zhàn)略的企業(yè)明顯能在后續(xù)發(fā)展中與競爭對手拉開差距。

中國數(shù)據(jù)競賽的崛起并非偶然，也不止是對國外先進模式的亦步亦趨，而是在技術(shù)落地應用需求增長、宏觀政策支持和云計算基礎(chǔ)不斷成熟等原因之下的必然結(jié)果。建立基于數(shù)據(jù)價值流動的生態(tài)系統(tǒng)，充分利用生態(tài)內(nèi)不斷升級的人才資源和技術(shù)資源賦能商業(yè)發(fā)展，已成為越來越多商業(yè)領(lǐng)袖的共識。

據(jù)悉，在《數(shù)據(jù)競賽白皮書·下篇·辦好一場競賽的實操手冊》中，和鯨科技將首次公開自身100+場專業(yè)賽事的服務(wù)經(jīng)驗，開源其數(shù)據(jù)競賽管理的方法論，這將對數(shù)據(jù)競賽行業(yè)產(chǎn)生不小的沖擊。和鯨科技是中國對標Kaggle成立的，最早的數(shù)據(jù)競賽平臺之一，且在這個過程中形成了在用戶數(shù)、用戶質(zhì)量、活躍度方面均有出色表現(xiàn)的中國數(shù)據(jù)科學家社區(qū)——和鯨社區(qū)(由Kesci發(fā)展而來)。在和鯨社區(qū)上，有來自中國聯(lián)通、中國平安、招商銀行、騰訊、百度、字節(jié)跳動、攜程、IBM、華為、默克中國、南京市人民政府、深圳市人民政府、鵬城實驗室等頭部企業(yè)與機構(gòu)舉辦數(shù)據(jù)競賽。通過開放競賽的機制和數(shù)據(jù)科學的手段，解決各個行業(yè)的業(yè)務(wù)難題。

國內(nèi)最高規(guī)格的大數(shù)據(jù)競賽，由教育部主辦的“中國高校計算機大賽-大數(shù)據(jù)挑戰(zhàn)賽”，以及獎金規(guī)模最大的人工智能大賽，由深圳市政府主辦的“全國人工智能大賽”，都選擇在和鯨社區(qū)完成全流程的組織。由此可見，《數(shù)據(jù)競賽白皮書·下篇·辦好一場競賽的實操手冊》必然會促進“數(shù)據(jù)競賽”這一高效、敏捷的數(shù)字化創(chuàng)新模式，在中國進一步發(fā)展。

申請創(chuàng)業(yè)報道，分享創(chuàng)業(yè)好點子。點擊此處，共同探討創(chuàng)業(yè)新機遇！