資源描述:
《基于web服務(wù)的分布式數(shù)據(jù)挖掘系統(tǒng)研究 (1)》由會員上傳分享,免費在線閱讀,更多相關(guān)內(nèi)容在學(xué)術(shù)論文-天天文庫。
1、華中科技大學(xué)碩士學(xué)位論文基于Web服務(wù)的分布式數(shù)據(jù)挖掘系統(tǒng)研究姓名:侯敬軍申請學(xué)位級別:碩士專業(yè):水利水電工程指導(dǎo)教師:曾致遠20040501摘要由于以下原因原有的集中式數(shù)據(jù)挖掘越來越不適應(yīng)新的需求1待處理的數(shù)據(jù)源是分布式存放在網(wǎng)絡(luò)的不同主機上的2于網(wǎng)絡(luò)帶寬的限制數(shù)據(jù)的私有性和安全性系統(tǒng)的不兼容性等原因把所有數(shù)據(jù)源集到一個集中的地方如數(shù)據(jù)倉庫進行集中數(shù)據(jù)挖掘往往是不現(xiàn)實的 3對挖掘系統(tǒng)的開放性和易用性的要求越來越高分布式數(shù)據(jù)挖掘技術(shù)就是為了解決上述問題而被提出的目前該研究領(lǐng)域的兩個重要
2、問題式設(shè)計合適的分布式數(shù)據(jù)挖掘系統(tǒng)的體系結(jié)構(gòu)和相應(yīng)的分布式挖掘算法本文將最新的分布式組件技術(shù)解決上述兩個問題方面做了一些嘗試Web服務(wù)技術(shù)引入分布式數(shù)據(jù)挖掘領(lǐng)域在首先介紹了分布式數(shù)據(jù)挖掘產(chǎn)生的背景研究現(xiàn)狀和成果存在的問題以及關(guān)聯(lián)規(guī)則挖掘的不同算法接著介紹了Web服務(wù)及其相關(guān)技以及Web服務(wù)技術(shù)的優(yōu)點和其適用場合給出了Web服務(wù)技術(shù)與分布式數(shù)據(jù)挖掘的結(jié)合點然后提出了一種跨平臺的易擴展的適用于分布環(huán)境下的基于Web服務(wù)的分布式數(shù)據(jù)挖掘系統(tǒng)架構(gòu)并結(jié)合上述系統(tǒng)的特點給出一個該系統(tǒng)中的分布式
3、關(guān)聯(lián)規(guī)則挖掘算法FDM-GS(FDMwithglobalsite)該算法應(yīng)用了新的候選集剪枝策略可有效減小候選集的規(guī)模和收集候選集支持計數(shù)時的網(wǎng)絡(luò)信息流量了詳細的說明并結(jié)合一個實例對該算法做關(guān)鍵詞數(shù)據(jù)挖掘關(guān)聯(lián)規(guī)則分布式計算組件技術(shù)Web服務(wù)IVAbstractForthefollowingreasons,theoriginalcentralizeddataminingbecamemoreandmoreoutofdate:1.Thedatasourceneedtobeprocessedisdis
4、tributedonthedifferentcomputersinthenetworks.2.Fortheconstrainofnetworksband,theprivacyandsafetyofdata,theincompatibilityofsystems,etc,itisnotrealistictoputalldatasourceinaplace(forexample,thedatawarehouse)forcentralizeddatamining.3.Moreandmoredemandsh
5、aveaddressedontheopennessandeasyaccessibility.Thedistributeddataminingtechnologywaspresentedfortheproblemsmentionedabove.Presently,thetwoimportantmattersinthisfieldarethat,designforsuitablearchitectureofdistributeddataminingsystemsandcorrespondingdistr
6、ibutedminingalgorithms.Thisarticleintroducedthelatesttechnologyfordistributedcomponenttechnology—Webservicestechnologyintodistributeddataminingfield,andtooksometentativeeffortsinsolvingtheaforementionedtwoproblems.Inthebeginning,thebackgroundforbringin
7、gdistributeddatamining,thestatusofresearchandresearchachievements,theexistingproblems,andalgorithmforassociationruleswereintroduced.Andthen,thewebservicesandrelatedtechnology,andtheadvantagesanddisadvantagesofwebservicetechnologywereintroduced,andtheco
8、nnectingpointforwebservicetechnologyanddistributeddatamining.Andthenamulti-platform,easy-extensible,suitablefordistributedenvironmentandweb-basedservicesdistributedassociationruleminingalgorithmFDM-GS(FDMwithglobalsite)wereproposed.This