基于hadoop的運(yùn)維日志采集分析平臺的設(shè)計(jì)與實(shí)現(xiàn)

《基于hadoop的運(yùn)維日志采集分析平臺的設(shè)計(jì)與實(shí)現(xiàn)》由會員上傳分享，免費(fèi)在線閱讀，更多相關(guān)內(nèi)容在學(xué)術(shù)論文-天天文庫。

1、分類號：了？３１１單位代碼：１０４２２密級：學(xué)號；馨碩±學(xué)位論文ＴｈｅｓｉｓｆｏｒＭａｓｔｅｒＤｅｒｅｅｇ（專業(yè)學(xué)位）論文題目；募子Ｈａｄｏｅｐ的運(yùn)維Ｓ志震薦分祈平臺巧硬計(jì)與窮現(xiàn)Ｄｅｓｉｎａｎｄｈ‘、ｌｅｍ：ｎ化攻；ｆｉｏｆｔｈｅｌａｔｂｎｎｏｆｇｐｐｏｐｅｉｕｄｏｎａｎｄｍ泣ｉｎｔｅｎａｎｔｅｉｏ廷ｉｉ〇?。。澹悖簦椋铮睿崳姡牐幔睿幔觯幔睿洌欤螅椋螅牐猓幔螅澹洌牐铮睿牐。洌洌铮铮穑崳娮髡咝彰|方。培養(yǎng)單位計(jì)算機(jī)科學(xué)與

2、技術(shù)學(xué)院專業(yè)名稱計(jì)算化技恭指導(dǎo)教師互時(shí)靴站巧巧合作導(dǎo)師＇．，—２０１Ｓ年４月？０日，＇．’．．．＇－，＇；分類號：ＴＰ３１１單位代碼：１０４２２密級：學(xué)號；２０１３１３３２３ＳＨＡＮＤＯＮＧＵＮＩＶＥＲＳＩＴＹ碩±學(xué)位論文ＴｈｅｓｉｓｆｏｒＭａｓｔｅｒＤｅｒｅｅｇ（專業(yè)學(xué)位）論文題目：基于Ｈａｄｏｏｐ的運(yùn)維日志采集分祈平臺的設(shè)計(jì)與實(shí)現(xiàn)Ｄｅｓｉｇｎａｎｄｉｍｐｌｅｍｅｎｔａｔｉｏｎｏｆｔｈ

3、ｅｐｌａｔｆｏｒｍｏｆｏｐｅｒａｔｉｏｎａｎｄｍａｉｎｔｅｎａｎｃｅｌｏｇｃｏｌｌｅｃｔｉｏｎａｎｄａｎａｌｙｓｉｓｂａｓｅｄｏｎＨａｄｏｏｐ作者姓名肖東方培養(yǎng)單位計(jì)算機(jī)科學(xué)與技術(shù)學(xué)院專業(yè)名稱計(jì)算機(jī)技術(shù)指導(dǎo)教師王曉琳則教授合作導(dǎo)師２０１６年４月２０日原創(chuàng)性聲明，獨(dú)本人鄭重聲明：所呈交的學(xué)位論文，是本人在導(dǎo)師的指導(dǎo)下立進(jìn)行研巧所取得的成果，本論文不。除文中己經(jīng)注明引用的內(nèi)容外包含任何其他個(gè)人或集體已經(jīng)發(fā)表或撰寫過的科研成果。

4、對本文的研究作出重要貢獻(xiàn)的個(gè)人和集體，均已在文中Ｗ明確方式標(biāo)明。本聲明的法律責(zé)任由本人承擔(dān)。－－論文作者簽名日期：２０１６３２０：啥知關(guān)于學(xué)位論文使用授權(quán)的聲明本人同意學(xué)校保留或向國家有關(guān)部口或機(jī)構(gòu)送交論文的印刷件和電子版，允許論文被查閱和借閱；本人授權(quán)山東大學(xué)可將本學(xué)位論－文的全部或部分內(nèi)容編入有關(guān)數(shù)據(jù)庫進(jìn)行檢索，可采用影印、縮?。崳娀蚱渌麖?fù)制手段保存論文和匯編本學(xué)位論文。保密論文在解密后應(yīng)遵守此（導(dǎo)師答金戸日期－３－２０；２０１６論文作者簽名：的Ａ

5、－山東大學(xué)碩±學(xué)位論文目泉巧要ＩＡＢＳＴＲＡＣＴＩＩ第１章緒論１１．１研究背景及意義１１２國．內(nèi)外相關(guān)研究２１．３論文主要工作３１４論文３．結(jié)構(gòu)第２章系統(tǒng)架構(gòu)設(shè)計(jì)５２．１平臺整體架構(gòu)５２．２分布式存儲管理５２．３數(shù)據(jù)加載子系統(tǒng)６２．４運(yùn)維日志關(guān)聯(lián)分析子系統(tǒng)７２．５本章小結(jié)９巧３章系統(tǒng)律細(xì)設(shè)計(jì)１０３．１數(shù)據(jù)存儲方案設(shè)計(jì)１０３丄１數(shù)據(jù)類型１０３．１．２數(shù)據(jù)訪問接口１１３．２數(shù)據(jù)加載

6、子系統(tǒng)設(shè)計(jì)１２３．２．１數(shù)據(jù)接入模塊設(shè)計(jì)１３３．２．２數(shù)據(jù)落地模塊設(shè)計(jì)１５３．３運(yùn)維日志關(guān)聯(lián)分析子系統(tǒng)設(shè)計(jì)１６３．３．１數(shù)據(jù)預(yù)處理模塊設(shè)計(jì)１６３．３．２特征訓(xùn)練模塊設(shè)計(jì)１６３．３．３流日志分類模塊設(shè)計(jì)１７３．３．４離線日志分類模塊設(shè)計(jì)１８３．３．５頻繁項(xiàng)集挖掘模塊設(shè)計(jì)巧３．４本章小結(jié)２０巧４章系統(tǒng)實(shí)現(xiàn)與測試２１４１２．?dāng)?shù)據(jù)加載子系統(tǒng)１４．１．１數(shù)據(jù)接入模塊２１４．１．２數(shù)據(jù)落地模塊２６Ｉ山東大

7、學(xué)碩擊學(xué)位論文４．２運(yùn)維日志關(guān)聯(lián)分析子系統(tǒng)２７４２７．２．１數(shù)據(jù)預(yù)處理模塊４３１．２．２特征訓(xùn)練模塊４３２．２．３流日志分類模塊４３４．２．４離線日志分類模塊４３５．２．５頻繁項(xiàng)集挖掘模塊４．３本章小結(jié)３７巧５章接建Ｈａｄｏｏｐ平臺３８５．１集群規(guī)劃如５．２部署前準(zhǔn)備巧５３９．２．１修改主機(jī)名５ｈｏ３９．２．２配置并同步ｓｔｓ文件５．２．３安裝并配置ｃｌｕｓｈ３９５．２４４０．配置免登

8、陸５ｉａｂｌ的ｌｉｎ４１．２．５關(guān)閑ｐｔ及ｓｅｕｘ５．２．６刪除舊版本的ｒｐｍ包４１５．２．７安裝配置ＨＴＴＰＤ服務(wù)４２５．２．８發(fā)布ＨＴＴＰＤ內(nèi)容４２５．２．９分發(fā)ｙｕｍ配置文件４５５．２．１０安裝ＭｙＳＱＬＪＤＢＣ驅(qū)動４６５－．３安裝ＣＭＳｅｒｖｅｒ．．．４６５．４燃ＣＤＨＳ４７．５５安裝ＣＤＨ服務(wù)４８５．５．１安裝ＺＯＯＫＥＥＰＥＲ４８５．５．２安裝皿ＦＳ４８５．５．３