歷經(jīng)3個月的激烈角逐,2021語言與智能技術(shù)競賽于近日發(fā)布了競賽結(jié)果的榜單。本次競賽由中國計算機學會(CCF)和中國中文信息學會(CIPS)聯(lián)合主辦,百度公司、中國計算機學會自然語言處理專委會和中國中文信息學會評測工作委員會共同承辦。比賽將在第六屆“語言與智能高峰論壇”上舉辦技術(shù)交流和頒獎,獲勝團隊將分享總計30萬元人民幣的獎金。屆時,論壇還將邀請國內(nèi)外學術(shù)界、工業(yè)界知名專家學者,面向社會公眾介紹語言與智能及相關(guān)領(lǐng)域的發(fā)展趨勢和創(chuàng)新成果。
2018年至今,該競賽已經(jīng)成功舉辦了三屆。今年競賽設(shè)立了來源于真實應用需求的三大任務——機器閱讀理解、多技能對話、多形態(tài)信息抽取,采用的數(shù)據(jù)集均來源于中文開源數(shù)據(jù)集項目“千言”。同時,在競賽結(jié)束后,“千言”將持續(xù)提供本次競賽的數(shù)據(jù)集下載和常規(guī)評測,支持自然語言處理領(lǐng)域的研究者、開發(fā)者的日常技術(shù)研發(fā)工作。
三千余支隊伍激烈角逐超往年 覆蓋廣泛競技水平高
據(jù)統(tǒng)計,本屆競賽三大任務賽題共有超過4300人次、3500支隊伍報名參加,累計收到有效提交結(jié)果1萬多次。
本屆競賽的三大賽題——機器閱讀理解、多技能對話、多形態(tài)信息抽取較往年賽題在難度上全面升級,覆蓋了更多的數(shù)據(jù)集和更加豐富的評測維度,對模型的魯棒性和泛化性等提出了更高的挑戰(zhàn)。盡管難度提升,根據(jù)比賽報名及提交情況來看,單任務參賽及提交隊伍較往屆數(shù)量反而提升、參賽熱情不減。
從參賽隊伍分布看,比賽延續(xù)了參賽隊伍一貫的多元化特點,大部分985、211高校均有參與,包括清華大學、北京大學、復旦大學、中國人民大學等知名高校,還有慕尼黑工業(yè)大學、南洋理工大學、早稻田大學、愛丁堡大學等國際學府。除了國內(nèi)外多所高校、科研機構(gòu)等的積極參與之外,本屆比賽中企業(yè)參賽隊伍達到五百多支,體現(xiàn)了產(chǎn)業(yè)界對于前沿NLP中文任務的關(guān)注和重視。參賽企業(yè)覆蓋了互聯(lián)網(wǎng)、AI、通訊、金融、能源、航空航天等多個領(lǐng)域,包含騰訊、華為、阿里、網(wǎng)易、頭條、中國移動、平安等知名企業(yè)。
從提交結(jié)果來看,本屆競賽也在三大賽題的得分上取得了新突破。如機器閱讀理解任務F1最高得分為69.41,較基線提升22.87%;多技能對話系統(tǒng)總得分從基線0.60提升到最好成績的1.17;多形態(tài)信息抽取任務綜合最高得分為79.481,較基線提升19.12%。其中,企業(yè)隊伍也展現(xiàn)了不俗的競賽實力,在三大賽題榜單上成績亮眼。
近日,2021語言與智能技術(shù)競賽已于官網(wǎng)公布獲獎榜單。未來將在第六屆“語言與智能高峰論壇”上舉辦頒獎儀式,屆時獲獎隊伍也會進行技術(shù)交流報告,對優(yōu)秀技術(shù)方案進行解讀。
機器閱讀理解任務榜單
多技能對話任務榜單
多形態(tài)信息抽取任務榜單
從真實應用需求出發(fā) 三大賽題攜手千言實現(xiàn)“反哺”式創(chuàng)新
理解和運用自然語言是人工智能的核心問題之一,語言智能的發(fā)展將推動人工智能技術(shù)加快落地。本屆競賽設(shè)立的三大任務——機器閱讀理解、多技能對話、多形態(tài)信息抽取均源于真實應用需求,每項任務設(shè)置了更加豐富的數(shù)據(jù)集合和評測維度,可以從多任務、魯棒性和泛化性等角度對技術(shù)效果進行綜合評價,從而推動技術(shù)更好地適應多領(lǐng)域、多場景的產(chǎn)業(yè)應用。
本次語言與智能技術(shù)競賽所采用的數(shù)據(jù)集均來自于中文開源數(shù)據(jù)集項目“千言”。作為面向自然語言理解和生成任務的中文開源數(shù)據(jù)集合,“千言”旨在為研究人員帶來一站式的數(shù)據(jù)集瀏覽、整理、下載和評測的科研體驗。在本次比賽結(jié)束后,自然語言處理領(lǐng)域的研究者、開發(fā)者可通過“千言”官網(wǎng)繼續(xù)下載和使用相關(guān)數(shù)據(jù)集,并參與相應的常規(guī)評測,不斷打磨和提升相關(guān)任務的技術(shù)水平,形成創(chuàng)新閉環(huán)。
百度全程提供技術(shù)支持 AI硬實力為大賽選手“保駕護航”
為了全力創(chuàng)造最佳競賽條件,充分激發(fā)選手的創(chuàng)新靈感,百度作為本次大賽承辦方為參賽選手提供了全面的技術(shù)資源和平臺支持。
其中,百度飛槳平臺為三大競賽任務提供了基線系統(tǒng),助力選手快速上手。同時,基于百度飛槳的人工智能學習與實訓社區(qū) AI Studio還提供了在線編程環(huán)境、免費 GPU算力支持,打破算力桎梏,在競賽全流程為選手斬獲佳績“保駕護航”。
一直以來,百度以持續(xù)深耕的核心AI能力為各行各業(yè)賦能,助力中國產(chǎn)業(yè)智能化轉(zhuǎn)型升級。連續(xù)三屆與學界、業(yè)界共同舉辦語言與智能技術(shù)競賽,百度希冀能夠進一步挖掘和培養(yǎng)AI技術(shù)人才,同時為技術(shù)在實際產(chǎn)業(yè)場景中的落地和應用提供更多新思路與可能,為人工智能技術(shù)與產(chǎn)業(yè)的發(fā)展貢獻不竭源動力。(永文)
免責聲明:本網(wǎng)轉(zhuǎn)載自其它媒體的文章,目的在于弘揚科技精神,傳遞更多科技信息,并不代表本網(wǎng)贊同其觀點和對其真實性負責,在此我們謹向原作者和原媒體致以敬意。如果您認為本站文章侵犯了您的版權(quán),請與我們聯(lián)系,我們將第一時間刪除。