資源描述:
《基于http協(xié)議面向藏文文本的實時監(jiān)測技術(shù)研究》由會員上傳分享,免費在線閱讀,更多相關(guān)內(nèi)容在學(xué)術(shù)論文-天天文庫。
1、碩士研究生學(xué)位論文基于HTTP協(xié)議面向藏文文本的實時監(jiān)測技術(shù)研究ResearchonReal-timeMonitoringTechnologyforTibetantextBasedonHTTPProtocol姓名:余長春指導(dǎo)老師:擁措院(部、中心):藏文信息技術(shù)研究中心專業(yè):計算機系統(tǒng)結(jié)構(gòu)研究方向:網(wǎng)絡(luò)與信息安全完成日期:2016年4月14日摘要2014年以來網(wǎng)絡(luò)信息安全成為當(dāng)今社會的熱門話題。網(wǎng)絡(luò)信息安全不僅包括網(wǎng)絡(luò)信息的保密性、完整性和真實可靠性方面,還包括對網(wǎng)絡(luò)中充斥著的大量垃圾信息的監(jiān)管和預(yù)防。目前以漢語為對象的垃圾信息過濾以及文本監(jiān)測技術(shù)已經(jīng)非常成熟,但是以藏文文本為對象的
2、檢測技術(shù)還有待發(fā)展。隨著藏文編碼國際標(biāo)準和國家標(biāo)準的發(fā)布和普及,藏文分詞技術(shù)的日益完善和提高,基于藏文國際編碼標(biāo)準和藏文分詞技術(shù)的各類應(yīng)用需求不斷呈現(xiàn)出來。網(wǎng)絡(luò)信息安全對維護國家利益,維護社會穩(wěn)定,推動信息技術(shù)發(fā)展有著重要意義。遏制垃圾信息的傳播,以及對出現(xiàn)垃圾信息的及時預(yù)警是網(wǎng)絡(luò)信息安全不可或缺的一部分。一個實時監(jiān)測預(yù)警系統(tǒng)能起到維護網(wǎng)絡(luò)環(huán)境和諧、快速反應(yīng)敏感信息、協(xié)助網(wǎng)管人員及時處理突發(fā)情況等作用。本文提出了基于HTTP協(xié)議面向藏文文本的實時監(jiān)測系統(tǒng)的整體構(gòu)架,并根據(jù)此架構(gòu)實現(xiàn)了一個藏文文本實時監(jiān)測系統(tǒng)。文中主要通過研究基于HTTP的數(shù)據(jù)還原技術(shù),實時抓取網(wǎng)絡(luò)中傳輸?shù)幕贖TTP
3、協(xié)議的數(shù)據(jù)包,并對數(shù)據(jù)包進行排序、拆分重組、數(shù)據(jù)解壓,從而實現(xiàn)實時還原HTTP數(shù)據(jù)內(nèi)容;通過研究多語言環(huán)境中藏文文本抽取方法,根據(jù)還原文本數(shù)據(jù)的編碼方式,采取對應(yīng)的藏文文本抽措施,實現(xiàn)抽取藏文文本的功能;通過研究有限自動機(DFA)算法和哈希表查找算法,利用有限自動機的思想,結(jié)合哈希表查找算法的特性,提出一個高效的關(guān)鍵詞查找算法,實現(xiàn)實時預(yù)警關(guān)鍵詞的功能。本文首次提出并實現(xiàn)將藏文分詞技術(shù)應(yīng)用到藏文文本實時監(jiān)測系統(tǒng)中。藏文分詞技術(shù)的應(yīng)用,有利于提高實時預(yù)警系統(tǒng)的準確率,也使系統(tǒng)邏輯更加簡單。同時本文提出了一個結(jié)合了DFA思想和哈希表查找算法的多層動態(tài)哈希表關(guān)鍵詞查找算法,通過DFA思想
4、將詞語分解成多個字節(jié),并分別對這些字節(jié)建立哈希表樹,從而減少每層哈希表的數(shù)據(jù)含量,進而盡可能的避免哈希表中沖突的發(fā)生。最后經(jīng)測試,本文提出的基于HTTP協(xié)議的藏文文本實時監(jiān)測系統(tǒng),具有良好的實時性,和預(yù)警準確性。關(guān)鍵詞:HTTP協(xié)議,藏文提取,實時監(jiān)測,藏文編碼轉(zhuǎn)換,關(guān)鍵詞匹配ABSTRACTSince2014,thenetworkinformationsecurityhasbecomeahottopicintoday'ssociety.Networkinformationsecurityincludesnotonlynetworkinformationconfidentiality
5、,integrity,andauthenticity,butalsoincludesmonitoringandpreventionofthenetworkfilledwhichhasalotofspam.CurrentlythespamfilteringandtextmonitoringtechnologyisverymatureinChinese,butinTibetantextobjectthesetechniquesyettobedeveloped.AsthepublicationandpopularizationofTibetancodinginternationalstan
6、dardsandnationalstandards,andtheexaltationofTibetanwordsegmentation,demandforallkindsofapplicationsbasedonTibetaninternationalcodingstandardandTibetanwordsegmentationconstantlypresented.Networkinformationsecurityhasimportantsignificancetosafeguardnationalinterests,safeguardingsocialstabilityand
7、promotingthedevelopmentofinformationtechnology.Timelywarningthespamandcurbingitsspreadspeedareindispensablepartofnetworkinformationsecurity.Areal-timemonitoringandearlywarningsystemscanmakecontributiontomaintainaharmoniousnetworke