谷歌（google）云計(jì)算基于大規(guī)模集群的海量數(shù)據(jù)處理技術(shù)

《谷歌（google）云計(jì)算基于大規(guī)模集群的海量數(shù)據(jù)處理技術(shù)》由會員上傳分享，免費(fèi)在線閱讀，更多相關(guān)內(nèi)容在學(xué)術(shù)論文-天天文庫。

1、谷歌（Google）云計(jì)算“基于大規(guī)模集群的海量數(shù)據(jù)處理技術(shù)”師資培訓(xùn)研討班邀請函尊敬的各位老師：您好！谷歌是世界上最大的云計(jì)算的實(shí)踐者。隨著云計(jì)算時代的到來，產(chǎn)業(yè)對于人才提出了新的要求，相應(yīng)的計(jì)算機(jī)課程面臨著內(nèi)容更新的需要。谷歌在2007年就提出了云計(jì)算學(xué)術(shù)合作計(jì)劃，通過與大學(xué)的合作，開發(fā)培養(yǎng)下一代符合產(chǎn)業(yè)需求新型人才的云計(jì)算課程。為了支持高校進(jìn)行云計(jì)算時代的課程建設(shè)和人才培養(yǎng)，谷歌公司將從11月30日至12月5日協(xié)同清華大學(xué)，舉辦云計(jì)算“基于大規(guī)模集群的海量數(shù)據(jù)處理技術(shù)”課程。本課程設(shè)置包括三個部分：課程講學(xué)、上機(jī)實(shí)驗(yàn)，以及課程結(jié)束之際的學(xué)生課程開發(fā)項(xiàng)目

2、，其目的是教學(xué)和實(shí)踐相結(jié)合，學(xué)以致用，培養(yǎng)學(xué)生創(chuàng)新和動手能力。本課程結(jié)合谷歌MapReduce數(shù)據(jù)處理技術(shù)，并作為谷歌支持中國高校云計(jì)算計(jì)劃和課程建設(shè)項(xiàng)目的一部分。師資培訓(xùn)研討班的信息，請參考如下：時間：2009年11月30日～12月5日，共6天；每天上午9:00-下午5:00地點(diǎn)：清華大學(xué)（具體地點(diǎn)在培訓(xùn)確認(rèn)函中給出）邀請對象：高校計(jì)算機(jī)專業(yè)和軟件工程專業(yè)，從事相關(guān)課程的授課教師培訓(xùn)內(nèi)容：本培訓(xùn)將基于谷歌（Google）公司與清華大學(xué)合作開設(shè)的有關(guān)集群分布式編程的課程。通過本課程的學(xué)習(xí)，學(xué)員將深入了解到通過大規(guī)模集群的模式處理海量數(shù)據(jù)的方式與編程方法。通過

3、實(shí)踐相關(guān)的課程內(nèi)容，使用開源的ApacheLuceneHadoop工具，學(xué)員將親身實(shí)踐Google文件系統(tǒng)以及Google所使用的分布式編程方式MapReduce。學(xué)員還需要完成特定的分布式應(yīng)用程序設(shè)計(jì)來鞏固所學(xué)的編程知識，用于處理實(shí)際的海量數(shù)據(jù)問題。課程詳細(xì)內(nèi)容請參考附件。預(yù)備知識：1)閱讀GoogleMapReduce技術(shù)論文：http://labs.google.com/papers/mapreduce-osdi04.pdf2)Multithreadedprogramming3)Javaprogramming,4)Eclipseenvironment,

4、aworkingknowledgeofLinux培訓(xùn)講師：清華大學(xué)陳康等老師，三年開設(shè)該課程的經(jīng)驗(yàn)費(fèi)用安排：谷歌將負(fù)擔(dān)培訓(xùn)期間的住宿、食宿費(fèi)用（11月30日-12月5日）、場地和設(shè)備租賃費(fèi)用、教材費(fèi)以及講師費(fèi)等。但來回差旅費(fèi)用請學(xué)員（學(xué)校）自理。5/5請有興趣在云計(jì)算方面進(jìn)行課程建設(shè)的老師，按照后一頁的報名回執(zhí)，填寫信息之后反饋回谷歌公司：helenhu@google.com.谷歌中國大學(xué)合作部2009年10月28日5/5回執(zhí):Google（谷歌）云計(jì)算“基于大規(guī)模集群的海量數(shù)據(jù)處理技術(shù)”師資培訓(xùn)研討班參加培訓(xùn)教師信息確認(rèn)姓名學(xué)校名稱教授課程手機(jī)號碼電話E-

5、mail姓名學(xué)校名稱教授課程手機(jī)號碼電話E-mail聯(lián)系人信息姓名電話手機(jī)E-mail胡斐然010-6250-440513911890519helenhu@google.com5/5附件、培訓(xùn)課程介紹基于大規(guī)模集群的海量數(shù)據(jù)處理技術(shù)課程簡介：本課程是Google公司與清華大學(xué)合作，在清華大學(xué)開設(shè)的有關(guān)集群分布式編程的課程。通過本課程的學(xué)習(xí)，學(xué)員將深入了解到通過大規(guī)模集群的模式處理海量數(shù)據(jù)的方式與編程方法。通過實(shí)踐相關(guān)的課程內(nèi)容，使用開源的ApacheLuceneHadoop工具，學(xué)員將親身實(shí)踐Google文件系統(tǒng)以及Google所使用的分布式編程方式MapR

6、educe。學(xué)員還需要完成特定的分布式應(yīng)用程序設(shè)計(jì)來鞏固所學(xué)的編程知識，用于處理實(shí)際的海量數(shù)據(jù)問題。課程內(nèi)容：1課程簡介主要講述分布式編程的模式，分布式編程所需要涉及到的相關(guān)知識，包括分布式的應(yīng)用問題，并行與分布的基礎(chǔ)，分布式的歷史，并行編程與同步等的相關(guān)內(nèi)容。2MapReduce編程技術(shù)主要講述有關(guān)MapReduce編程技術(shù)的來龍去脈，相關(guān)的理論與技術(shù)實(shí)現(xiàn)，包括函數(shù)式編程語言的簡介，大規(guī)模數(shù)據(jù)處理，MapReduce的編程模型，MapReduce編程實(shí)例，在實(shí)際編程中的錯誤處理以及優(yōu)化等相關(guān)內(nèi)容。3分布式系統(tǒng)的層次這一節(jié)的內(nèi)容是對分布式編程內(nèi)容的簡介，包括

7、網(wǎng)絡(luò)的基本處理，遠(yuǎn)程過程調(diào)用，事務(wù)處理系統(tǒng)的工作流程，可靠性等方面的內(nèi)容。4分布式文件系統(tǒng)分布式文件系統(tǒng)是分布式編程的一塊重要的內(nèi)容，是構(gòu)建上層應(yīng)用的基礎(chǔ)，用來存儲各種應(yīng)用的數(shù)據(jù)。本節(jié)的內(nèi)容包括文件系統(tǒng)簡介，網(wǎng)絡(luò)文件系統(tǒng)NFS以及AFS相關(guān)的內(nèi)容，Google使用的GFS（GoogleFileSystem）等相關(guān)的內(nèi)容。5其它的分布式系統(tǒng)將通過具體的例子來講述在實(shí)際的可運(yùn)行的分布式系統(tǒng)的內(nèi)部結(jié)構(gòu)，內(nèi)容包括域名系統(tǒng)，BOINC系統(tǒng)，PlanetLab等，這些內(nèi)容為學(xué)員將來的研究提供入門的知識。提高的內(nèi)容還包括google所使用的分布式鎖技術(shù)Chubby以及分布

8、式的結(jié)構(gòu)化數(shù)據(jù)處理方法BigTable。實(shí)驗(yàn)內(nèi)容5/