資源描述：
《基于hadoop平臺的日志分析系統(tǒng)》由會員上傳分享，免費(fèi)在線閱讀，更多相關(guān)內(nèi)容在學(xué)術(shù)論文-天天文庫。
1、萬方數(shù)據(jù)基于Hadoop平臺的日志分析系統(tǒng)目錄目錄摘要????????????????????????????????．．IVABSTRACT???．．??????????．??????．?．．．??????????．????????1～，第一章緒論??????????????????????????????．11．1選題背景及意義??????????????????????????．21．2與選題有關(guān)的研究狀況???????????????????????．21．2．1分布式計(jì)算研究現(xiàn)狀??????????????????????一21．2．2云計(jì)算平臺
2、現(xiàn)狀????????????????????????．．21．3本文的研究內(nèi)容和章節(jié)安排?????????????????????一5第二章HADOOP技術(shù)介紹???????????????????????。72．1HADOOP整體架構(gòu)????????????????????????．．72．1．1HDFS??????????????????????????????????????．72．1．2MAPREDUCE?????????????????????????????????．82．2HADOOPMAPREDUCE模型調(diào)度和容錯(cuò)分析???????????
3、?．．102．2．1HADOOPMAPREDUCE的調(diào)度機(jī)制???????????????102．2．2HADOOPMAPREDUCE的容錯(cuò)機(jī)制???????????????112．3HADOOP應(yīng)用??????????????????????????112．：；．1HBASE????????????????????????????????????．．1l2．3．2HIVE?????????????????????????????????????．．122．3．3MAHOUT???????????????????????????????????122．4本
4、章總結(jié)?????????????????????????????11第三章HADOOP平臺架構(gòu)的深入分析??????????????????143．1HDFS架構(gòu)分析??????????????????????????143．1．1HDFS的目標(biāo)??????????????????????????????一143．1．2NAMENODE與DATANODE??????????????????．153．1．3塊的概念與數(shù)據(jù)復(fù)制??????????????????????．163．1．4文件系統(tǒng)的命名空間??????????????????????．173．1．
5、5元數(shù)據(jù)的持久化????????????????????????．173．2MAPREDUCE架構(gòu)的深入分析???????????????????183．2．1MAPREDUCE的總體執(zhí)行流程分析????????????????183．2．2MAP過程介紹?????????????????????????．193．2．3SHUFFLE過程介紹???????????????????????193．2．3．1MAP端???????????????????????????????????．19萬方數(shù)據(jù)基于Hadoop平臺的日志分析系統(tǒng)目錄弛邶3．2刪．3．2貯R
6、EE囂端‘I?????????嗍刪吣舢洲洲舢刪㈣?’：332蒜嘟介紹??????????·”淵戮I?．．21．3本章小結(jié)?????????????????_?點(diǎn)烹導(dǎo)蘭三魯．!??．2lIi萬方數(shù)據(jù)基于Hadoop平臺的日志分析系統(tǒng)目錄6．2展望????????????????????????一參考文獻(xiàn)??????????????????????????致謝??????????????????????????????????．參與的科研項(xiàng)目???????????????????????甜舵鉗笛萬方數(shù)據(jù)基于Hadoop平臺的日志分析系統(tǒng)摘要摘要隨著互聯(lián)網(wǎng)的迅速
7、發(fā)展和廣泛普及，web的信息量以驚人的速度增長。目前，WorldWideWeb已深入到人類社會的每一個(gè)角落，成為擁有近億個(gè)工作站，數(shù)十億頁面，蘊(yùn)含著巨大潛在價(jià)值知識的分布式信息空間。電子商務(wù)網(wǎng)站創(chuàng)造了前所未有的訪問量，各種大型網(wǎng)絡(luò)游戲不斷刷新著在線用戶數(shù)峰值，于此同時(shí)這些大型系統(tǒng)都記錄下了海量的用戶日志。就電子商務(wù)網(wǎng)站而言，處理網(wǎng)站訪問日志有助于為網(wǎng)站的管理者提供決策支持進(jìn)而指導(dǎo)網(wǎng)站運(yùn)營，如改善網(wǎng)站結(jié)構(gòu)提升用戶體驗(yàn)：進(jìn)行關(guān)鍵詞營銷提升流量、促進(jìn)轉(zhuǎn)化、提升效益：分析用戶行為進(jìn)行個(gè)性化的推薦和營銷來提高網(wǎng)站的核一Ii,競爭力，在激烈的市場競爭中保持優(yōu)勢。Had
8、oop是Apache下的一個(gè)開源分布式計(jì)算平臺，它提供簡單的編程模
