基于云計算環(huán)境的web數(shù)據(jù)挖掘算法研究

《基于云計算環(huán)境的web數(shù)據(jù)挖掘算法研究》由會員上傳分享，免費在線閱讀，更多相關(guān)內(nèi)容在教育資源-天天文庫。

1、基于云計算環(huán)境的web數(shù)據(jù)挖掘算法研究致謝5-6摘要6-7ABSTRACT71引言10-122云計算和Web數(shù)據(jù)挖掘技術(shù)12-27????2.1云計算12-17????????2.1.1云計算的分類和特點13-15????????2.1.2云計算的應(yīng)用場景15-16????????2.1.3云計算技術(shù)的研究現(xiàn)狀16-17????2.2云計算的關(guān)鍵技術(shù)17-22????????2.2.1數(shù)據(jù)存儲領(lǐng)域的核心技術(shù)17-19????????2.2.2數(shù)據(jù)管理領(lǐng)域的關(guān)鍵技術(shù)19-20????????2.2.3編程模型領(lǐng)域的關(guān)鍵技術(shù)20-22????2.3Web數(shù)據(jù)挖掘概述22-27????????2.3

2、.1WebGraph及其應(yīng)用23-25????????2.3.2社交網(wǎng)絡(luò)服務(wù)(SocialNetworkService)25-273WebGraph數(shù)據(jù)的獲取與展示27-37????3.1WebGraph挖掘的數(shù)據(jù)結(jié)構(gòu)和存儲方案27-30????????3.1.1WebGraph算法使用的數(shù)據(jù)結(jié)構(gòu)27????????3.1.2WebGraph數(shù)據(jù)的存儲方式27-30????3.2Graph數(shù)據(jù)的抓取30-33????????3.2.1申請Facebook應(yīng)用程序30-31????????3.2.2開發(fā)Facebook應(yīng)用程序獲取用戶關(guān)系31-33????3.3Graph數(shù)據(jù)的形象化展示33-3

3、6????3.4本章總結(jié)36-374Graph挖掘算法37-46????4.1Graph直徑求解算法設(shè)計37-44????????4.1.1Graph的直徑37-38????????4.1.2算法思想分析38-41????????4.1.3OptimDM算法的優(yōu)化實現(xiàn)41-44????4.2OptimDM算法的性能分析44-45????4.3本章總結(jié)45-465算法仿真實驗與應(yīng)用分析46-59????5.1Hadoop平臺的搭建46-51????????5.1.1Hadoop平臺與OptimDM算法46-48????????5.1.2單節(jié)點Hadoop環(huán)境的搭建48-49????????5.1

4、.3多節(jié)點分布式運行Hadoop49-50????????5.1.4基于Elicpse的MapReduce開發(fā)環(huán)境50-51????5.2算法的仿真和性能測試51-57????????5.2.1傳統(tǒng)單節(jié)點環(huán)境的圖直徑求解實驗52-53????????5.2.2集群環(huán)境中OptimDM算法的實驗53-57????5.3OptimDM算法的應(yīng)用57-58????5.4本章總結(jié)58-596總結(jié)和展望59-60參考文獻60-63作者簡歷63-65學(xué)位論文數(shù)據(jù)集65一種基于云計算的數(shù)據(jù)挖掘平臺架構(gòu)設(shè)計與實現(xiàn)摘要2-3Abstract3第一章引言6-8????1.1課題研究目的與意義6-7????1.2國

5、內(nèi)外研究現(xiàn)狀7????1.3論文各部分的內(nèi)容安排7-8第二章云計算平臺8-14????2.1云計算定義8????2.2云計算特點8-9????2.3云計算與網(wǎng)格計算的對比9-10????2.4云計算架構(gòu)10-11????2.5現(xiàn)有云計算平臺簡介11-14第三章數(shù)據(jù)規(guī)約工具的設(shè)計與實現(xiàn)14-21????3.1數(shù)據(jù)規(guī)約工具設(shè)計14-16????3.2數(shù)據(jù)規(guī)約工具實現(xiàn)16-21????????3.2.1數(shù)據(jù)定義規(guī)范16-19????????3.2.2基于DOM的XML解析方法19-21第四章基于云計算的數(shù)據(jù)挖掘系統(tǒng)架構(gòu)21-29????4.1目標(biāo)系統(tǒng)模型21-22????4.2功能層次框架設(shè)計22-

6、23????????4.2.1算法層22-23????????4.2.2應(yīng)用層23????????4.2.3用戶層23????4.3設(shè)計要點23-29????????4.3.1插件系統(tǒng)框架23-25????????4.3.2開放接口設(shè)計25-29第五章基于云計算的數(shù)據(jù)挖掘系統(tǒng)實現(xiàn)29-39????5.1系統(tǒng)開發(fā)環(huán)境29-30????5.2系統(tǒng)開發(fā)關(guān)鍵思想與技術(shù)30-31????????5.2.1原型開發(fā)模型30-31????????5.2.3基于WSGI規(guī)范的開發(fā)31????5.3系統(tǒng)開發(fā)關(guān)鍵步驟31-35????????5.3.1算法模塊插件系統(tǒng)實現(xiàn)31-33????????5.3.2數(shù)據(jù)集

7、訪問模塊實現(xiàn)33-35????5.4當(dāng)前系統(tǒng)簡介35-38????5.5實驗結(jié)果與分析38-39第六章結(jié)論與展望39-40參考文獻40-43攻讀學(xué)位期間的研究成果43-44致謝44-46基于云計算的語義搜索引擎研究目錄2-4摘要4-5Abstract5第一章引言6-15????1.1云計算的定義6-10????1.2Google的云計算介紹10-13????????1.2.1GFS10-11???