AI人工智能知識科普篇—自然語言理解
2019.09.09
自然語言理解(NaturalLanguageUnderstanding)即(ji)文(wen)本(ben)理(li)解(jie),和(he)語(yu)音(yin)圖(tu)像(xiang)的(de)模(mo)式(shi)識(shi)別(bie)技(ji)術(shu)有(you)著(zhe)本(ben)質(zhi)的(de)區(qu)別(bie),語(yu)言(yan)作(zuo)為(wei)知(zhi)識(shi)的(de)載(zai)體(ti),承(cheng)載(zai)了(le)複(fu)雜(za)的(de)信(xin)息(xi)量(liang),具(ju)有(you)高(gao)度(du)的(de)抽(chou)象(xiang)性(xing),對(dui)語(yu)言(yan)的(de)理(li)解(jie)屬(shu)於(yu)認(ren)知(zhi)層(ceng)麵(mian),不(bu)能(neng)僅(jin)靠(kao)模(mo)式(shi)匹(pi)配(pei)的(de)方(fang)式(shi)完(wan)成(cheng)。
2)自然語言理解的應用:搜索引擎+機器翻譯;
自(zi)然(ran)語(yu)言(yan)理(li)解(jie)最(zui)典(dian)型(xing)兩(liang)種(zhong)應(ying)用(yong)為(wei)搜(sou)索(suo)引(yin)擎(qing)和(he)機(ji)器(qi)翻(fan)譯(yi)。搜(sou)索(suo)引(yin)擎(qing)可(ke)以(yi)在(zai)一(yi)定(ding)程(cheng)度(du)上(shang)理(li)解(jie)人(ren)類(lei)的(de)自(zi)然(ran)語(yu)言(yan),從(cong)自(zi)然(ran)語(yu)言(yan)中(zhong)抽(chou)取(qu)出(chu)關(guan)鍵(jian)內(nei)容(rong)並(bing)用(yong)於(yu)檢(jian)索(suo),最(zui)終(zhong)達(da)到(dao)搜(sou)索(suo)引(yin)擎(qing)和(he)自(zi)然(ran)語(yu)言(yan)用(yong)戶(hu)之(zhi)間(jian)的(de)良(liang)好(hao)銜(xian)接(jie),可(ke)以(yi)在(zai)兩(liang)者(zhe)之(zhi)間(jian)建(jian)立(li)起(qi)更(geng)高(gao)效(xiao),更(geng)深(shen)層(ceng)的(de)信(xin)息(xi)傳(chuan)遞(di)。
3)自然語言理解技術在搜索引擎中的應用
4)自然語言理解技術在機器翻譯中的應用
事實上搜索引擎和機器翻譯不分家,互聯網、移動互聯網為其充實了語料庫使得其發展模態發生了質的改變。互聯網、移動互聯網除了將原先線下的信息(原有語料)進行在線化之外,還衍生出來的新型UGC模式:知識分享數據,像維基百科、百度百科等都是人為校準過的詞條,噪聲小;社交數據,像微博和微信等展現用戶的個性化、主觀化、時效性,可以用來做個性化推薦、情感傾向分析、以及熱點輿情的檢測和跟蹤等;社區、論壇數據,像果殼、知乎等為搜索引擎提供了問答知識、問(wen)答(da)資(zi)源(yuan)等(deng)數(shu)據(ju)源(yuan)。另(ling)一(yi)方(fang)麵(mian),因(yin)為(wei)深(shen)度(du)學(xue)習(xi)采(cai)用(yong)的(de)層(ceng)次(ci)結(jie)構(gou)從(cong)大(da)規(gui)模(mo)數(shu)據(ju)中(zhong)自(zi)發(fa)學(xue)習(xi)的(de)黑(hei)盒(he)子(zi)模(mo)式(shi)是(shi)不(bu)可(ke)解(jie)釋(shi)的(de),而(er)以(yi)語(yu)言(yan)為(wei)媒(mei)介(jie)的(de)人(ren)與(yu)人(ren)之(zhi)間(jian)的(de)溝(gou)通(tong)應(ying)該(gai)要(yao)建(jian)立(li)在(zai)相(xiang)互(hu)理(li)解(jie)的(de)基(ji)礎(chu)上(shang),所(suo)以(yi)深(shen)度(du)學(xue)習(xi)在(zai)搜(sou)索(suo)引(yin)擎(qing)和(he)機(ji)器(qi)翻(fan)譯(yi)上(shang)的(de)效(xiao)用(yong)沒(mei)有(you)語(yu)音(yin)圖(tu)像(xiang)識(shi)別(bie)領(ling)域(yu)來(lai)得(de)顯(xian)著(zhu)。
2)自然語言理解的應用:搜索引擎+機器翻譯;
自(zi)然(ran)語(yu)言(yan)理(li)解(jie)最(zui)典(dian)型(xing)兩(liang)種(zhong)應(ying)用(yong)為(wei)搜(sou)索(suo)引(yin)擎(qing)和(he)機(ji)器(qi)翻(fan)譯(yi)。搜(sou)索(suo)引(yin)擎(qing)可(ke)以(yi)在(zai)一(yi)定(ding)程(cheng)度(du)上(shang)理(li)解(jie)人(ren)類(lei)的(de)自(zi)然(ran)語(yu)言(yan),從(cong)自(zi)然(ran)語(yu)言(yan)中(zhong)抽(chou)取(qu)出(chu)關(guan)鍵(jian)內(nei)容(rong)並(bing)用(yong)於(yu)檢(jian)索(suo),最(zui)終(zhong)達(da)到(dao)搜(sou)索(suo)引(yin)擎(qing)和(he)自(zi)然(ran)語(yu)言(yan)用(yong)戶(hu)之(zhi)間(jian)的(de)良(liang)好(hao)銜(xian)接(jie),可(ke)以(yi)在(zai)兩(liang)者(zhe)之(zhi)間(jian)建(jian)立(li)起(qi)更(geng)高(gao)效(xiao),更(geng)深(shen)層(ceng)的(de)信(xin)息(xi)傳(chuan)遞(di)。
3)自然語言理解技術在搜索引擎中的應用












