資源描述:
《ip網(wǎng)絡(luò)流量數(shù)據(jù)采集與存儲(chǔ)系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn) (1)》由會(huì)員上傳分享,免費(fèi)在線閱讀,更多相關(guān)內(nèi)容在學(xué)術(shù)論文-天天文庫。
1、武漢理工大學(xué)碩士學(xué)位論文IP網(wǎng)絡(luò)流量數(shù)據(jù)采集與存儲(chǔ)系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)姓名:易澤湘申請(qǐng)學(xué)位級(jí)別:碩士專業(yè):計(jì)算機(jī)應(yīng)用技術(shù)指導(dǎo)教師:潘昊20070401摘要近年來,隨著以TCP/IP為核心協(xié)議的互連網(wǎng)的快速發(fā)展,IP技術(shù)作為一種承載業(yè)務(wù)和溝通傳輸?shù)闹虚g體得到了極大的發(fā)展?;诂幍臉I(yè)務(wù)應(yīng)用發(fā)展迅速,網(wǎng)絡(luò)的規(guī)模日趨龐大。網(wǎng)絡(luò)的可用性與網(wǎng)絡(luò)規(guī)模膨脹的矛盾顯得更加突出。結(jié)構(gòu)越來越復(fù)雜和規(guī)模越來越龐大的網(wǎng)絡(luò)系統(tǒng)更需要網(wǎng)絡(luò)管理軟件來保證系統(tǒng)的正常運(yùn)作,網(wǎng)絡(luò)管理的質(zhì)量會(huì)直接影響到網(wǎng)絡(luò)的運(yùn)行質(zhì)量,管理好一個(gè)網(wǎng)絡(luò)與網(wǎng)絡(luò)的建設(shè)同等重要。網(wǎng)絡(luò)管理軟件通過對(duì)網(wǎng)絡(luò)數(shù)據(jù)的分析
2、達(dá)到對(duì)網(wǎng)絡(luò)資源、性能、故障的管理,而網(wǎng)絡(luò)數(shù)據(jù)的獲取是網(wǎng)絡(luò)管理軟件中最為重要的部分,本文詳細(xì)闡述了球網(wǎng)絡(luò)流量數(shù)據(jù)采集與存儲(chǔ)系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)。文章首先介紹了網(wǎng)絡(luò)管理的一些基礎(chǔ)知識(shí),包括網(wǎng)絡(luò)管理的基本概念、網(wǎng)絡(luò)管理的五大功能以及網(wǎng)絡(luò)管理的體系結(jié)構(gòu)。其次,文章分析了網(wǎng)管數(shù)據(jù)采集系統(tǒng)所使用的主要協(xié)議,包括SNMP、NetFIOW、sFlow以及RMON等。接著,文章介紹了口網(wǎng)絡(luò)海量數(shù)據(jù)的存儲(chǔ)方法,并比較了幾種存儲(chǔ)方案的優(yōu)劣。。文章最后結(jié)合項(xiàng)目實(shí)踐詳細(xì)描述了口網(wǎng)絡(luò)數(shù)據(jù)采集與存儲(chǔ)系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)。鑒于被管網(wǎng)元的多樣性和管理類別的不同,我們?cè)跀?shù)據(jù)采集層上采取
3、了不同的協(xié)議采集不同的網(wǎng)管數(shù)據(jù),把數(shù)據(jù)采集分為主動(dòng)數(shù)據(jù)采集和被動(dòng)數(shù)據(jù)采集。NetFlow、sFlow、SNMPTRAP屬于被動(dòng)采集的范疇,在flowd里面自動(dòng)實(shí)現(xiàn)數(shù)據(jù)的采集、告警和入庫操作;而SNMP、CLI屬于主動(dòng)采集,必須讓采集服務(wù)器使用輪詢操作來及時(shí)取得網(wǎng)管數(shù)據(jù)。為了避免海量數(shù)據(jù)存取導(dǎo)致的平凡I/O操作,在數(shù)據(jù)存儲(chǔ)上我們采取了嵌入式數(shù)據(jù)庫,并將原始數(shù)據(jù)和處理了的業(yè)務(wù)數(shù)據(jù)進(jìn)行分庫存儲(chǔ);另外為了提高系統(tǒng)的整體效率,我們對(duì)系統(tǒng)進(jìn)行分層處理,每一層對(duì)應(yīng)著不同的進(jìn)程,數(shù)據(jù)采集層為flowd進(jìn)程和arpd進(jìn)程、業(yè)務(wù)處理層為flow-mining進(jìn)程
4、,而前臺(tái)展示層我們則使用J2EE規(guī)范技術(shù)實(shí)現(xiàn)。,為了提高數(shù)據(jù)接收和處理效率,我們用C語言編寫了數(shù)據(jù)采集層和業(yè)務(wù)處理層,而前臺(tái)展示層我們則用跨平臺(tái)性良好的JAVA技術(shù)實(shí)現(xiàn)。關(guān)鍵字:NetFlow,sFlow,RMON,網(wǎng)絡(luò)管理AbstractWiththegreatdevelopmentofInteract,theIPnetworktechnology,asac砒l'ierofbusinessandcommunication,havinggotrapidgrowthinrecentyears·ThebusinessbasedonIPtechno
5、logyalsomakegoodtime,whichmakethenetworkbl挖.omemoreandmorecnoEBlons,andincreasetheinconsistencybetweenavailabifityandsizeofthenetwork.Thequalityofthenetworkmanagementcandirectlyaffectthenetwork’Stransport,theconstructionisasimportantasmanagementtonetwork..Networkmanagements
6、oftwaremanagethenetworkresource、performance、faultbyanalyzingthenetworkdata,howtogetnetworkdataisthemostimportantpartdm'ingthecourseofdevelopingthenetworkmanagementsoftware,Thisarticlewillelaborateonthedesignandimplementmethodofdataacquisitionandstoragesystem.Thispaperfirsti
7、ntroducessomebasetheoryofnetworkmanagementtechnology,includingbaseconception,mainfunctionsandframeworkofnetworkmanagement.Secondly,thispaperanalyzesSomeprotocolsusedbydataacquisition,includingSNMP,NetFlowandRMON.Afterthatthispapergivesabriefintroductionabouthowtostoringbigd
8、ataofIPnetwork,atthesametime,Toshowdifferenceswecomparemanykindsofstoringmeans.Fin