資源描述:
《基于web服務(wù)的分布式數(shù)據(jù)挖掘系統(tǒng)研究 (1)》由會(huì)員上傳分享,免費(fèi)在線閱讀,更多相關(guān)內(nèi)容在學(xué)術(shù)論文-天天文庫。
1、華中科技大學(xué)碩士學(xué)位論文基于Web服務(wù)的分布式數(shù)據(jù)挖掘系統(tǒng)研究姓名:侯敬軍申請學(xué)位級別:碩士專業(yè):水利水電工程指導(dǎo)教師:曾致遠(yuǎn)20040501摘要由于以下原因原有的集中式數(shù)據(jù)挖掘越來越不適應(yīng)新的需求1待處理的數(shù)據(jù)源是分布式存放在網(wǎng)絡(luò)的不同主機(jī)上的2于網(wǎng)絡(luò)帶寬的限制數(shù)據(jù)的私有性和安全性系統(tǒng)的不兼容性等原因把所有數(shù)據(jù)源集到一個(gè)集中的地方如數(shù)據(jù)倉庫進(jìn)行集中數(shù)據(jù)挖掘往往是不現(xiàn)實(shí)的 3對挖掘系統(tǒng)的開放性和易用性的要求越來越高分布式數(shù)據(jù)挖掘技術(shù)就是為了解決上述問題而被提出的目前該研究領(lǐng)域的兩個(gè)重要
2、問題式設(shè)計(jì)合適的分布式數(shù)據(jù)挖掘系統(tǒng)的體系結(jié)構(gòu)和相應(yīng)的分布式挖掘算法本文將最新的分布式組件技術(shù)解決上述兩個(gè)問題方面做了一些嘗試Web服務(wù)技術(shù)引入分布式數(shù)據(jù)挖掘領(lǐng)域在首先介紹了分布式數(shù)據(jù)挖掘產(chǎn)生的背景研究現(xiàn)狀和成果存在的問題以及關(guān)聯(lián)規(guī)則挖掘的不同算法接著介紹了Web服務(wù)及其相關(guān)技以及Web服務(wù)技術(shù)的優(yōu)點(diǎn)和其適用場合給出了Web服務(wù)技術(shù)與分布式數(shù)據(jù)挖掘的結(jié)合點(diǎn)然后提出了一種跨平臺的易擴(kuò)展的適用于分布環(huán)境下的基于Web服務(wù)的分布式數(shù)據(jù)挖掘系統(tǒng)架構(gòu)并結(jié)合上述系統(tǒng)的特點(diǎn)給出一個(gè)該系統(tǒng)中的分布式
3、關(guān)聯(lián)規(guī)則挖掘算法FDM-GS(FDMwithglobalsite)該算法應(yīng)用了新的候選集剪枝策略可有效減小候選集的規(guī)模和收集候選集支持計(jì)數(shù)時(shí)的網(wǎng)絡(luò)信息流量了詳細(xì)的說明并結(jié)合一個(gè)實(shí)例對該算法做關(guān)鍵詞數(shù)據(jù)挖掘關(guān)聯(lián)規(guī)則分布式計(jì)算組件技術(shù)Web服務(wù)IVAbstractForthefollowingreasons,theoriginalcentralizeddataminingbecamemoreandmoreoutofdate:1.Thedatasourceneedtobeprocessedisdis
4、tributedonthedifferentcomputersinthenetworks.2.Fortheconstrainofnetworksband,theprivacyandsafetyofdata,theincompatibilityofsystems,etc,itisnotrealistictoputalldatasourceinaplace(forexample,thedatawarehouse)forcentralizeddatamining.3.Moreandmoredemandsh
5、aveaddressedontheopennessandeasyaccessibility.Thedistributeddataminingtechnologywaspresentedfortheproblemsmentionedabove.Presently,thetwoimportantmattersinthisfieldarethat,designforsuitablearchitectureofdistributeddataminingsystemsandcorrespondingdistr
6、ibutedminingalgorithms.Thisarticleintroducedthelatesttechnologyfordistributedcomponenttechnology—Webservicestechnologyintodistributeddataminingfield,andtooksometentativeeffortsinsolvingtheaforementionedtwoproblems.Inthebeginning,thebackgroundforbringin
7、gdistributeddatamining,thestatusofresearchandresearchachievements,theexistingproblems,andalgorithmforassociationruleswereintroduced.Andthen,thewebservicesandrelatedtechnology,andtheadvantagesanddisadvantagesofwebservicetechnologywereintroduced,andtheco
8、nnectingpointforwebservicetechnologyanddistributeddatamining.Andthenamulti-platform,easy-extensible,suitablefordistributedenvironmentandweb-basedservicesdistributedassociationruleminingalgorithmFDM-GS(FDMwithglobalsite)wereproposed.This