近日,在美國休斯敦閉幕的第13屆網(wǎng)絡搜索與數(shù)據(jù)挖掘國際會議(WSDM 2020)上,華為云帶領的聯(lián)合團隊摘得WSDM Cup 2020大賽“論文引用意圖識別任務”金牌。
WSDM被譽為全球信息檢索領域最有影響力也最權威的會議之一,會議關注社交網(wǎng)絡上的搜索與數(shù)據(jù)挖掘,尤其關注搜索與數(shù)據(jù)挖掘模型、算法設計與分析、產業(yè)應用和提升準確性與效果的實驗分析。今年已經(jīng)是WSDM的第十三屆會議。
本次WSDM Cup共有三個賽題任務,華為云奪金賽題內容為“論文引用意圖識別”:比賽提供一個論文庫(約含80萬篇論文),同時提供對被引用論文的引用文本描述,參賽選手需要根據(jù)論文引用描述從論文庫中匹配三篇最相關的論文。
論文是人類最前沿知識的媒介,如果可以理解論文中的數(shù)據(jù),可以極大地擴充計算機理解知識的能力和范圍。在論文中,作者經(jīng)常會引用其他論文,并對被引論文做出對應描述。如果通過計算機可以自動地理解、識別描述對應的被引論文,不僅可以加深我們對科研脈絡的理解,還能在科研知識圖譜、科研自動問答系統(tǒng)和自動摘要系統(tǒng)等領域有所進步。
華為云語音語義創(chuàng)新Lab帶領華南理工大學、華中科技大學、武漢大學、江南大學學生組成的聯(lián)合團隊,針對該問題制定了“整體召回+重排+集成”的方案。在整體召回階段,通過輕量化的文本相似度計算方法(如BM25、TFIDF、Word2Vec等),以較少的計算代價從大規(guī)模論文庫中檢索出給定查詢的可能相關的論文集合。在重排階段,通過計算量大但更準確的方法對這些候選論文中的每一篇論文計算和引用描述的相似度值并重新排序,例如采用基于深度學習的預訓練語言模型BERT等。華為云團隊觀察到,賽題中所給語料都是生物醫(yī)學領域,因此采用了基于生物醫(yī)藥和科學領域語料進行預訓練的BioBERT和SciBERT語言模型對論文進行重排。通過對所有模型的結果進行集成,最終得到三篇最相關的論文。
華為云在本次比賽中運用的文本匹配技術,可廣泛用于搜索、對話機器人、知識圖譜構建等領域。
憑借在自然語言處理領域的全棧技術積累,華為云連續(xù)斬獲了多個相關領域權威比賽冠軍。2019年10月華為云在DigSci科學數(shù)據(jù)挖掘大賽(學術論文搜索匹配大賽)上奪冠,精準率超過第二名5個百分點。在2019 CCF大數(shù)據(jù)與計算智能大賽決賽中,華為云獲得金融實體級情感分析大賽冠軍,體現(xiàn)了在文本情感分析和知識圖譜領域的實力。
目前,華為云語音語義相關服務已經(jīng)成功應用于政務、金融、油氣、醫(yī)療、汽車、物流、保險、電商、稅務、媒體等具有語音識別、語言理解、知識管理等需求的業(yè)務領域。
免責聲明：本網(wǎng)站內容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿，凡在本網(wǎng)站出現(xiàn)的信息，均僅供參考。本網(wǎng)站將盡力確保所提供信息的準確性及可靠性，但不保證有關資料的準確性及可靠性，讀者在使用前請進一步核實，并對任何自主決定的行為負責。本網(wǎng)站對有關資料所引致的錯誤、不確或遺漏，概不負任何法律責任。任何單位或個人認為本網(wǎng)站中的網(wǎng)頁或鏈接內容可能涉嫌侵犯其知識產權或存在不實內容時，應及時向本網(wǎng)站提出書面權利通知或不實情況說明，并提供身份證明、權屬證明及詳細侵權或不實情況證明。本網(wǎng)站在收到上述法律文件后，將會依法盡快聯(lián)系相關文章源頭核實，溝通刪除相關內容或斷開相關鏈接。
