近日,在全球自然語(yǔ)言處理領(lǐng)域頂級(jí)賽事GLUE Benchmark中,阿里巴巴達(dá)摩院以平均分90.3分的成績(jī)奪冠,戰(zhàn)勝了來(lái)自Google、微軟、Facebook、斯坦福大學(xué)等企業(yè)和高校的團(tuán)隊(duì)。自然語(yǔ)言理解是人工智能的核心技術(shù)之一,GLUE Benchmark(通用語(yǔ)言理解評(píng)估基準(zhǔn))比賽排名是衡量自然語(yǔ)言理解技術(shù)水平的重要指標(biāo)。比賽設(shè)置了自然語(yǔ)言推斷、語(yǔ)義相似度、問(wèn)答匹配、情感分析等9項(xiàng)任務(wù),最后按平均分綜合排名。
達(dá)摩院NLP團(tuán)隊(duì)取得了CoLA、MRPC、QQP、WNLI等4個(gè)任務(wù)的最佳效果,以平均分90.3分位列第一。據(jù)了解,目前,阿里AI的表現(xiàn)已經(jīng)超越了人類水平(87.1分)。早在2018年初,阿里AI就在機(jī)器閱讀理解頂級(jí)賽事SQuAD中打破世界紀(jì)錄,首次超越人類成績(jī)。2019年,阿里AI登頂GLUE榜單,并于同年6月在常識(shí)QA領(lǐng)域的權(quán)威數(shù)據(jù)集CommonsenseQA中奪冠,刷新了MSMARCO文本閱讀理解挑戰(zhàn)賽的紀(jì)錄。
據(jù)介紹,達(dá)摩院NLP團(tuán)隊(duì)此次開(kāi)發(fā)的StructBERT模型好比給機(jī)器內(nèi)置了一個(gè)“語(yǔ)法識(shí)別器”,使機(jī)器在面對(duì)語(yǔ)序錯(cuò)亂或不符合語(yǔ)法習(xí)慣的詞句時(shí),仍能準(zhǔn)確理解并給出正確的表達(dá)和回應(yīng),大大提高機(jī)器對(duì)詞語(yǔ)、句子以及語(yǔ)言整體的理解力。目前,這一技術(shù)已廣泛使用于阿里旗下阿里小蜜、螞蟻金服、優(yōu)酷等業(yè)務(wù)。阿里達(dá)摩院的語(yǔ)言模型和閱讀理解技術(shù)也被用于行業(yè)賦能,推進(jìn)AI技術(shù)在醫(yī)療、電力、金融等行業(yè)的落地。