資源描述:
《淺談交互式問(wèn)答系統(tǒng)中的省略恢復(fù)研究》由會(huì)員上傳分享,免費(fèi)在線閱讀,更多相關(guān)內(nèi)容在學(xué)術(shù)論文-天天文庫(kù)。
1、碩士學(xué)位論文交互式問(wèn)答系統(tǒng)中的省略恢復(fù)研究ELLIPSISRECOVERYTECHNOLOGYININTERACTIVEQUESTIONANSWERINGSYSTEM魏征哈爾濱工業(yè)大學(xué)2010年12月-國(guó)內(nèi)圖書(shū)分類號(hào):TP391.3學(xué)校代碼:10213國(guó)際圖書(shū)分類號(hào):621.3密級(jí):公開(kāi)工學(xué)碩士學(xué)位論文交互式問(wèn)答系統(tǒng)中的省略恢復(fù)研究碩士研究生:魏征導(dǎo)師:王曉龍教授申請(qǐng)學(xué)位:工學(xué)碩士學(xué)科、專業(yè):計(jì)算機(jī)科學(xué)與技術(shù)所在單位:計(jì)算機(jī)科學(xué)與技術(shù)學(xué)院答辯日期:2010年12月授予學(xué)位單位:哈爾濱工業(yè)大學(xué)-ClassifiedIndex:TP391.3U.D.C:621.3Dissert
2、ationfortheMasterDegreeofEngineeringELLIPSISRECOVERYTECHNOLOGYININTERACTIVEQUESTIONANSWERINGSYSTEMCandidate:ZhengWeiSupervisor:Prof.XiaolongWangAcademicDegreeAppliedfor:MasterofEngineeringSpecialty:ComputerScienceandTechnologyAffiliation:ComputerScienceandTechnologyDateofDefence:Dec,2010De
3、gree-Conferring-Institution:HarbinInstituteofTechnology哈爾濱工業(yè)大學(xué)工學(xué)碩士學(xué)位論文摘要在漢語(yǔ)中,省略是非常普遍的一個(gè)現(xiàn)象。對(duì)于漢語(yǔ)省略的研究,一直是自然語(yǔ)言處理領(lǐng)域的熱門(mén)課題。漢語(yǔ)省略研究對(duì)于問(wèn)答系統(tǒng)、機(jī)器翻譯、信息抽取等領(lǐng)域有著至關(guān)重要的作用。本課題主要針對(duì)交互式問(wèn)答系統(tǒng)做了省略問(wèn)句恢復(fù)的研究。在交互式問(wèn)答系統(tǒng)中,存在著大量的省略問(wèn)句。根據(jù)對(duì)真實(shí)環(huán)境下收集的語(yǔ)料的統(tǒng)計(jì),大概有40%的問(wèn)句屬于省略問(wèn)句。如果不對(duì)其缺失信息進(jìn)行恢復(fù),則計(jì)算機(jī)無(wú)法知道用戶的真實(shí)意圖。因此,省略問(wèn)句恢復(fù)是交互式問(wèn)答系統(tǒng)中至關(guān)重要的一個(gè)環(huán)節(jié)。
4、本課題首先利用維基百科的分類信息和模式匹配的方法抽取了大量新詞,用來(lái)擴(kuò)展Hownet。利用依存句法分析歸結(jié)語(yǔ)義關(guān)系,建立了一個(gè)包含上下位關(guān)系、屬性關(guān)系、動(dòng)賓關(guān)系等語(yǔ)義關(guān)系的語(yǔ)義關(guān)系表。這些語(yǔ)義關(guān)系被用在省略問(wèn)句的分類和恢復(fù)中。本課題將省略問(wèn)句劃分為7類,包括語(yǔ)義完整、主語(yǔ)省略、指代等,利用機(jī)器學(xué)習(xí)的方法來(lái)對(duì)問(wèn)句進(jìn)行分類。在對(duì)問(wèn)句進(jìn)行分類之前,首先根據(jù)語(yǔ)法、句法等信息提取特征,然后對(duì)幾種常用的分類方法做了比較,最終采用C4.5決策樹(shù)算法作為最終的分類算法,并取得了76.15%的正確率。針對(duì)分類之后的問(wèn)句,采取不同的策略對(duì)其進(jìn)行恢復(fù),主要利用問(wèn)句結(jié)構(gòu)、語(yǔ)義關(guān)系,距離等信息來(lái)確定
5、缺失信息。由于指代在省略問(wèn)句中占了很大比例,因此重點(diǎn)對(duì)其進(jìn)行了處理。主要利用了代詞的單復(fù)數(shù)、性別等信息,來(lái)確定最佳的候選詞。最后,我們對(duì)省略恢復(fù)的結(jié)果做了評(píng)測(cè),在兩個(gè)語(yǔ)料集上的正確率分別為82.9%和75.3%,并且與他人做了對(duì)比,本課題所采用的方法有明顯提高。關(guān)鍵詞:省略恢復(fù);語(yǔ)義關(guān)系;交互式問(wèn)答;知網(wǎng);維基百科I哈爾濱工業(yè)大學(xué)工學(xué)碩士學(xué)位論文AbstractEllipsisisaverycommonphenomenoninChineselanguage.TheresearchinChineseellipsishasbeenahottopicformanyyears.It
6、isveryimportantforresearcharealikequestionandanswering,machinetranslation,informationretrievaletc.Thispaperintroducesawaytoimplementellipsisrecoveryintheareaofinteractivequestionandanswering.Therearealotofellipsisquestionsininteractivequestionandansweringsystem.Statisticsshowthatabout40%of
7、thequestionareellipsisones.Withoutellipsisrecovery,there?sliitlehopeforthesystemtogiveacorrectanswer.Soellipsisrecoveryisofvitalimportantforinteractivequestionandansweringsystem.ThistopicusesWikipediaandHownettobuildasemanticrelationtable.Newwordsareextractedf