deep web數(shù)據(jù)抽取及語(yǔ)義標(biāo)注研究

《deep web數(shù)據(jù)抽取及語(yǔ)義標(biāo)注研究》由會(huì)員上傳分享，免費(fèi)在線(xiàn)閱讀，更多相關(guān)內(nèi)容在學(xué)術(shù)論文-天天文庫(kù)。

1、河北大學(xué)碩士學(xué)位論文DeepWeb數(shù)據(jù)抽取及語(yǔ)義標(biāo)注研究姓名：魏勇剛申請(qǐng)學(xué)位級(jí)別：碩士專(zhuān)業(yè)：計(jì)算機(jī)應(yīng)用技術(shù)指導(dǎo)教師：袁方20090501摘要隨著計(jì)算機(jī)和網(wǎng)絡(luò)技術(shù)的快速發(fā)展，互聯(lián)網(wǎng)在人們的日常生活中發(fā)揮著越來(lái)越重要的作用。信息檢索作為互聯(lián)網(wǎng)應(yīng)用的重要組成部分，是用戶(hù)獲取信息的主要方法。目前，信息檢索一般通過(guò)搜索引擎完成。由于技術(shù)原因，傳統(tǒng)的搜索引擎只能發(fā)現(xiàn)靜態(tài)網(wǎng)頁(yè)內(nèi)容，而無(wú)法獲取Web數(shù)據(jù)庫(kù)中的信息。如何能夠充分利用Web數(shù)據(jù)庫(kù)中豐富的資源，成為一個(gè)值得研究的問(wèn)題。存儲(chǔ)在W曲數(shù)據(jù)庫(kù)中、不能通過(guò)超鏈接訪(fǎng)問(wèn)的資源集合被稱(chēng)為Deepw曲。為自動(dòng)獲取De

2、epWeb背后眾多Web數(shù)據(jù)庫(kù)中的資源，需要建立DeepWeb數(shù)據(jù)集成系統(tǒng)，該系統(tǒng)的查詢(xún)結(jié)果處理模塊分為數(shù)據(jù)抽取和語(yǔ)義標(biāo)注兩部分。數(shù)據(jù)抽取是指通過(guò)技術(shù)手段將Web頁(yè)面上的數(shù)據(jù)抽取出來(lái)，保存為XML文檔或關(guān)系模式，作為下一步處理的基礎(chǔ)。語(yǔ)義標(biāo)注是指對(duì)抽取出的數(shù)據(jù)增加語(yǔ)義注釋?zhuān)阌谟?jì)算機(jī)識(shí)別與處理，從而具有更高的利用價(jià)值。本文使用Xpath技術(shù)完成DeepWreb數(shù)據(jù)抽取并提出一種基于中文詞性和領(lǐng)域知識(shí)的語(yǔ)義標(biāo)注方法。基于Xpath的數(shù)據(jù)抽取方法首先將DeepWreb查詢(xún)結(jié)果頁(yè)面規(guī)范化為XML格式，然后在遍歷XML文檔的過(guò)程中確定待抽取數(shù)據(jù)路徑表達(dá)

3、式，最后根據(jù)該表達(dá)式完成數(shù)據(jù)抽取并保存為XML格式。語(yǔ)義標(biāo)注給抽取出的數(shù)據(jù)增加語(yǔ)義信息。本文所述語(yǔ)義標(biāo)注方法借助中文分詞工具得到抽取結(jié)果的詞性，并根據(jù)詞性或詞性組合與語(yǔ)義建立映射規(guī)則，同時(shí)結(jié)合領(lǐng)域知識(shí)進(jìn)行語(yǔ)義標(biāo)注。實(shí)驗(yàn)表明，本文所述方法能夠?qū)eepWreb查詢(xún)結(jié)果準(zhǔn)確抽取并對(duì)抽取結(jié)果進(jìn)行語(yǔ)義標(biāo)注，從而驗(yàn)證了方法的有效性。關(guān)鍵詞DeepWeb數(shù)據(jù)抽取語(yǔ)義標(biāo)注AbstractWiththerapiddevelopmentofcomputerandnetworktechnologies，Internetisplayingamoreimportant

4、roleinourdailylifetheneverbefore．AsallimportantpartoftheInternetapplications，searchingonlinehasbecomethemainwaytoobtaininformationformanypeople．Atpresent，searchingengineisthemostcommonlyusedt001．Limitedbytechnologysupports，mostmainstreamsearchenginescanonlyreturnthesurfaceof

5、staticwebs，butCannotdirectlyacquireinformationfromwebdatabase。SotheresearchonhowtoutilizetheresourcesinDeepwebismeaningful．Deepwebisdefinedastheaggregateofresourcesinwebdatabases，whichcannotbeaccessedbythehyperlink．ADeepwebdataintegrationsystemwillhastobecreatedtoobtainresou

6、rcesinDeepweb．TheDeepwebqueryresultprocessingmodelincludestwoparts：dataextractionandsemanticannotation．DataextractionisthemeansofextractinginformationinawebpagebysometechnicalmethodsandsavinginformationinXMLformatorrelationalschema,asthebasisoffurtherprocess．Andthetermsemant

7、icannotationindicatesaddingsemanticannotationontheextracteddataSOwhichwillbeeasilyrecognizedbycomputersandobtainbetterutilizationvalue．ThispaperperformedthedataextractionbyusingXpath，andthenproposedaDeepWebsemanticannotationmethodbasedonChinesepart—of-speechanddomainknowledg

8、e．InthisXpathextrationmethod，XMLstandardizationisfirstlyperformedonthesearc