自然語言處理在信息檢索中的應(yīng)用綜述

《自然語言處理在信息檢索中的應(yīng)用綜述》由會員上傳分享，免費在線閱讀，更多相關(guān)內(nèi)容在學(xué)術(shù)論文-天天文庫。

1、第!"卷#第!期中文信息學(xué)報89:;!"，+9;!!$$%年&月’()*+,-(./01+2321+.(*4,51(+6*(/2331+74<=;，!$$%文章編號："$$&>$$%%（!$$%）$!>$$&?>""自然語言處理在信息檢索中的應(yīng)用綜述王燦輝，張敏，馬少平（清華大學(xué)計算機科學(xué)與技術(shù)系，北京"$$$@A）!摘#要：在信息檢索發(fā)展的過程中，研究者們不斷嘗試著將自然語言處理應(yīng)用到檢索里，希望能夠為檢索效果提高帶來幫助。然而這些嘗試的結(jié)果大多和研究者們最初的設(shè)想相反，自然語言處理在大多數(shù)情況下沒有改進信息檢索效果，甚至反而起了負面作用。即便有一些幫助，也往往是微小的，遠遠不如自然語言處理

2、所需要的計算消耗那么大。研究者們對這些現(xiàn)象進行了分析，認為：自然語言處理更適合于應(yīng)用在需要精確結(jié)果的任務(wù)中，例如問答系統(tǒng)、信息抽取等；自然語言處理需要針對信息檢索進行優(yōu)化才可能發(fā)揮積極作用。最新的一些進展（例如在語言模型中加入自然語言處理）在一定程度上印證了這一結(jié)論。關(guān)鍵詞：人工智能；自然語言處理；綜述；信息檢索中圖分類號：56&B"####文獻標(biāo)識碼：,!"#$%&’()*+,#$+-.+/0#+0&1$(2&334/04/5/)($6+,4(/7&,$4&%+-C,+7/EFG，H0,+74GD，4,3E<9>IGDJ（KLI<=MNLDM9O/9NIFML=3PGLDPL

3、PED9:9JR，5SGDJEF<)DGTL=SGMR，ULGVGDJ"$$$@A，/EGD<）!83,$+2,：+P=L

4、DGO+-6EL:ILQ1*FDQL=S9NLPG=PFNSM=L:M=

5、LLQSM9WL9IMGNGYLQO9=1*GD9=QL=M9WLLOOLPMGTL;*LPLDM=L>SL<=PE，L;J;

6、展至今已有十幾年術(shù)則有著巨大的計算消耗，很難被認為是值得［"］的。在信息檢索技術(shù)中結(jié)合自然語言處理資源，的歷史。在這十幾年里，研究者們不斷嘗試著將自［!］例如詞典，實驗結(jié)果也不能令人滿意。然語言處理應(yīng)用到信息檢索中，試圖提高信息檢索信息檢索中常常使用到的自然語言處理技術(shù)包的效果。自然語言處理包括自然語言處理技術(shù)和自括去除停止詞、取詞根、詞性標(biāo)注、詞義消歧、句法分然語言處理資源。在信息檢索中使用自然語言處理析、命名實體識別、指代消解等，自然語言處理資源收稿日期：!$$^>$^>$A#定稿日期：!$$^>"">"A基金項目：國家B%&重點基礎(chǔ)研究資助項目（!$$A/U&"@"$@）；國家自然科學(xué)基

7、金資助項目（^$^!"$^!，^$?$&$^A）；國家@^&計劃資助項目（!$$^,,$"H"A"）作者簡介：王燦輝（"B@"—），男，博士生，主要研究方向為信息檢索、機器學(xué)習(xí)。!如果不加特別說明，本文中的信息檢索是狹義的，即文檔檢索（K9PFNLDM*LM=GLT<:）。+=中文信息學(xué)報!""#年［+］［.］包括的則是$%&’()*和,%-()*這樣的詞典。取詞根和詞性標(biāo)注等。自然語言處理技術(shù)被