自然語(yǔ)言處理在信息檢索中的應(yīng)用綜述

《自然語(yǔ)言處理在信息檢索中的應(yīng)用綜述》由會(huì)員上傳分享，免費(fèi)在線(xiàn)閱讀，更多相關(guān)內(nèi)容在學(xué)術(shù)論文-天天文庫(kù)。

1、第!"卷#第!期中文信息學(xué)報(bào)89:;!"，+9;!!$$%年&月’()*+,-(./01+2321+.(*4,51(+6*(/2331+74<=;，!$$%文章編號(hào)："$$&>$$%%（!$$%）$!>$$&?>""自然語(yǔ)言處理在信息檢索中的應(yīng)用綜述王燦輝，張敏，馬少平（清華大學(xué)計(jì)算機(jī)科學(xué)與技術(shù)系，北京"$$$@A）!摘#要：在信息檢索發(fā)展的過(guò)程中，研究者們不斷嘗試著將自然語(yǔ)言處理應(yīng)用到檢索里，希望能夠?yàn)闄z索效果提高帶來(lái)幫助。然而這些嘗試的結(jié)果大多和研究者們最初的設(shè)想相反，自然語(yǔ)言處理在大多數(shù)情況下沒(méi)有改進(jìn)信息檢索效果，甚至反而起了負(fù)面作用。即便有一些幫助，也往往是微小的，遠(yuǎn)遠(yuǎn)不如自然語(yǔ)言處理

2、所需要的計(jì)算消耗那么大。研究者們對(duì)這些現(xiàn)象進(jìn)行了分析，認(rèn)為：自然語(yǔ)言處理更適合于應(yīng)用在需要精確結(jié)果的任務(wù)中，例如問(wèn)答系統(tǒng)、信息抽取等；自然語(yǔ)言處理需要針對(duì)信息檢索進(jìn)行優(yōu)化才可能發(fā)揮積極作用。最新的一些進(jìn)展（例如在語(yǔ)言模型中加入自然語(yǔ)言處理）在一定程度上印證了這一結(jié)論。關(guān)鍵詞：人工智能；自然語(yǔ)言處理；綜述；信息檢索中圖分類(lèi)號(hào)：56&B"####文獻(xiàn)標(biāo)識(shí)碼：,!"#$%&’()*+,#$+-.+/0#+0&1$(2&334/04/5/)($6+,4(/7&,$4&%+-C,+7/EFG，H0,+74GD，4,3E<9>IGDJ（KLI<=MNLDM9O/9NIFML=3PGLDPL

3、PED9:9JR，5SGDJEF<)DGTL=SGMR，ULGVGDJ"$$$@A，/EGD<）!83,$+2,：+P=L

4、DGO+-6EL:ILQ1*FDQL=S9NLPG=PFNSM=L:M=

5、LLQSM9WL9IMGNGYLQO9=1*GD9=QL=M9WLLOOLPMGTL;*LPLDM=L>SL<=PE，L;J;

6、展至今已有十幾年術(shù)則有著巨大的計(jì)算消耗，很難被認(rèn)為是值得［"］的。在信息檢索技術(shù)中結(jié)合自然語(yǔ)言處理資源，的歷史。在這十幾年里，研究者們不斷嘗試著將自［!］例如詞典，實(shí)驗(yàn)結(jié)果也不能令人滿(mǎn)意。然語(yǔ)言處理應(yīng)用到信息檢索中，試圖提高信息檢索信息檢索中常常使用到的自然語(yǔ)言處理技術(shù)包的效果。自然語(yǔ)言處理包括自然語(yǔ)言處理技術(shù)和自括去除停止詞、取詞根、詞性標(biāo)注、詞義消歧、句法分然語(yǔ)言處理資源。在信息檢索中使用自然語(yǔ)言處理析、命名實(shí)體識(shí)別、指代消解等，自然語(yǔ)言處理資源收稿日期：!$$^>$^>$A#定稿日期：!$$^>"">"A基金項(xiàng)目：國(guó)家B%&重點(diǎn)基礎(chǔ)研究資助項(xiàng)目（!$$A/U&"@"$@）；國(guó)家自然科學(xué)基

7、金資助項(xiàng)目（^$^!"$^!，^$?$&$^A）；國(guó)家@^&計(jì)劃資助項(xiàng)目（!$$^,,$"H"A"）作者簡(jiǎn)介：王燦輝（"B@"—），男，博士生，主要研究方向?yàn)樾畔z索、機(jī)器學(xué)習(xí)。!如果不加特別說(shuō)明，本文中的信息檢索是狹義的，即文檔檢索（K9PFNLDM*LM=GLT<:）。+=中文信息學(xué)報(bào)!""#年［+］［.］包括的則是$%&’()*和,%-()*這樣的詞典。取詞根和詞性標(biāo)注等。自然語(yǔ)言處理技術(shù)被