基于hbase的sql轉(zhuǎn)化引擎研究

ID:32972377

大小:1.19 MB

頁(yè)數(shù):77頁(yè)

時(shí)間:2019-02-18

基于hbase的sql轉(zhuǎn)化引擎研究_第1頁(yè)
基于hbase的sql轉(zhuǎn)化引擎研究_第2頁(yè)
基于hbase的sql轉(zhuǎn)化引擎研究_第3頁(yè)
基于hbase的sql轉(zhuǎn)化引擎研究_第4頁(yè)
基于hbase的sql轉(zhuǎn)化引擎研究_第5頁(yè)
資源描述:

《基于hbase的sql轉(zhuǎn)化引擎研究》由會(huì)員上傳分享,免費(fèi)在線閱讀,更多相關(guān)內(nèi)容在學(xué)術(shù)論文-天天文庫(kù)。

1、電子科技大學(xué)UNIVERSITYOFELECTRONICSCIENCEANDTECHNOLOGYOFCHINA碩士學(xué)位論文MASTERTHESIS論文題目基于HBase的SQL轉(zhuǎn)化引擎研究學(xué)科專業(yè)計(jì)算機(jī)系統(tǒng)結(jié)構(gòu)學(xué)號(hào)201120160258作者姓名唐韜指導(dǎo)教師湯羽教授分類號(hào)密級(jí)注1UDC學(xué)位論文基于HBase的SQL轉(zhuǎn)化引擎研究(題名和副題名)唐韜(作者姓名)指導(dǎo)教師湯羽教授電子科技大學(xué)成都(姓名、職稱、單位名稱)申請(qǐng)學(xué)位級(jí)別碩士學(xué)科專業(yè)計(jì)算機(jī)系統(tǒng)結(jié)構(gòu)提交論文日期2014.3論文答辯日期2014.5學(xué)位授予單位和日期電

2、子科技大學(xué)2014年6月答辯委員會(huì)主席評(píng)閱人注1:注明《國(guó)際十進(jìn)分類法UDC》的類號(hào)。RESEACHONSQLCONVERSIONENGINEBASEDONHBASEAMasterThesisSubmittedtoUniversityofElectronicScienceandTechnologyofChinaMajor:ComputerArchitectureAuthor:TangTaoAdvisor:Prof.TangYuSchool:SchoolofComputerScience&Engineering獨(dú)創(chuàng)性聲

3、明本人聲明所呈交的學(xué)位論文是本人在導(dǎo)師指導(dǎo)下進(jìn)行的研究工作及取得的研究成果。據(jù)我所知,除了文中特別加以標(biāo)注和致謝的地方外,論文中不包含其他人已經(jīng)發(fā)表或撰寫過(guò)的研究成果,也不包含為獲得電子科技大學(xué)或其它教育機(jī)構(gòu)的學(xué)位或證書而使用過(guò)的材料。與我一同工作的同志對(duì)本研究所做的任何貢獻(xiàn)均已在論文中作了明確的說(shuō)明并表示謝意。作者簽名:日期:年月日論文使用授權(quán)本學(xué)位論文作者完全了解電子科技大學(xué)有關(guān)保留、使用學(xué)位論文的規(guī)定,有權(quán)保留并向國(guó)家有關(guān)部門或機(jī)構(gòu)送交論文的復(fù)印件和磁盤,允許論文被查閱和借閱。本人授權(quán)電子科技大學(xué)可以將學(xué)位論文

4、的全部或部分內(nèi)容編入有關(guān)數(shù)據(jù)庫(kù)進(jìn)行檢索,可以采用影印、縮印或掃描等復(fù)制手段保存、匯編學(xué)位論文。(保密的學(xué)位論文在解密后應(yīng)遵守此規(guī)定)作者簽名:導(dǎo)師簽名:日期:年月日摘要摘要互聯(lián)網(wǎng)和移動(dòng)通信的出現(xiàn),是信息化高速發(fā)展的結(jié)果。互聯(lián)網(wǎng)和移動(dòng)通信逐漸成為人們最主要的交流溝通工具。信息化的世界需要大數(shù)據(jù)的支持,大數(shù)據(jù)的出現(xiàn)又使得關(guān)系型數(shù)據(jù)庫(kù)暴露出了種種的不足,這使得關(guān)系型數(shù)據(jù)庫(kù)的統(tǒng)治地位岌岌可危。在此背景下,NoSQL數(shù)據(jù)庫(kù)孕育而生,NoSQL數(shù)據(jù)庫(kù)產(chǎn)品猶如雨后春筍般蓬勃發(fā)展。這些數(shù)據(jù)庫(kù)的最大特點(diǎn)就是能夠進(jìn)行GB級(jí)別到TB級(jí)別的

5、數(shù)據(jù)處理。其中,HBase備受關(guān)注。然而,為了使得數(shù)據(jù)庫(kù)能夠支持大數(shù)據(jù)的處理和非結(jié)構(gòu)化數(shù)據(jù),NoSQL數(shù)據(jù)庫(kù)放棄了關(guān)系型數(shù)據(jù)庫(kù)強(qiáng)制的事務(wù)完整性,二級(jí)索引機(jī)制和SQL語(yǔ)句作為輸入的查詢操作。隨著HBase的流行,人們開始著手為HBase實(shí)現(xiàn)一個(gè)支持SQL的轉(zhuǎn)化層,以降低對(duì)HBase使用的學(xué)習(xí)難度。本文開篇對(duì)本論文撰寫的研究背景和意義進(jìn)行了闡述,說(shuō)明了設(shè)計(jì)和實(shí)現(xiàn)一個(gè)基于HBase的SQL轉(zhuǎn)化引擎的重要性。然后,用一章的內(nèi)容對(duì)SQL轉(zhuǎn)化引擎相關(guān)的背景知識(shí)進(jìn)行了介紹,主要包括對(duì)Hadoop的概念和架構(gòu)的介紹;對(duì)HBase整體

6、設(shè)計(jì)介紹和HBase與傳統(tǒng)關(guān)系型數(shù)據(jù)庫(kù)對(duì)比分析;以及對(duì)ANTLR這個(gè)解析工具的工作流程和作用進(jìn)行了詳細(xì)的說(shuō)明介紹。接下來(lái),是對(duì)SQL轉(zhuǎn)化引擎系統(tǒng)設(shè)計(jì)架構(gòu)的介紹,分層介紹了SQL解析層、SQL分析層、SQL-HBase轉(zhuǎn)化層以及HBaseAPI調(diào)用層。接著,是對(duì)SQL轉(zhuǎn)化引擎的系統(tǒng)實(shí)現(xiàn)進(jìn)行了充分的討論,說(shuō)明了各個(gè)部分實(shí)現(xiàn)的原理和關(guān)鍵技術(shù)。需要補(bǔ)充的是,系統(tǒng)實(shí)現(xiàn)利用了HBase現(xiàn)有的大部分接口和協(xié)處理器框架來(lái)完成傳統(tǒng)關(guān)系型數(shù)據(jù)庫(kù)的查詢和聚合。文章最后也對(duì)SQL轉(zhuǎn)化引擎的效果進(jìn)行了通過(guò)性測(cè)試和時(shí)間性能測(cè)試。綜上所述,本論文

7、提出了設(shè)計(jì)一個(gè)基于HBase的SQL轉(zhuǎn)化引擎,使得HBase能接收SQL語(yǔ)句作來(lái)操縱HBase的設(shè)想變?yōu)楝F(xiàn)實(shí)。通過(guò)ANTLR對(duì)SQL語(yǔ)句進(jìn)行解析,對(duì)解析的結(jié)果進(jìn)行對(duì)象化封裝并對(duì)參數(shù)進(jìn)行遍歷訪問(wèn)求解出需要查找的列和行,再調(diào)用了經(jīng)過(guò)封裝的HBaseAPI類方法來(lái)返回結(jié)果,實(shí)現(xiàn)了一個(gè)可用的,簡(jiǎn)單的SQL轉(zhuǎn)化引擎。本論文也是對(duì)HBase擴(kuò)展開發(fā)的一個(gè)新的嘗試,對(duì)于普及HBase做出了一定的貢獻(xiàn)。本論文中得到的結(jié)論和觀點(diǎn)也是有利于后來(lái)人對(duì)HBase研究和理解。論文最后討論的SQL轉(zhuǎn)化引擎不足,以及未來(lái)需要進(jìn)行的工作。關(guān)鍵詞:H

8、Base,ANTLR,SQL,轉(zhuǎn)化引擎IABSTRACTABSTRACTTherapiddevelopmentofinformalizationleadstotheemergenceoftheInternetandmobilecommunications.Bothofthemaregraduallybecomingthemostimportan

當(dāng)前文檔最多預(yù)覽五頁(yè),下載文檔查看全文

此文檔下載收益歸作者所有

當(dāng)前文檔最多預(yù)覽五頁(yè),下載文檔查看全文
溫馨提示:
1. 部分包含數(shù)學(xué)公式或PPT動(dòng)畫的文件,查看預(yù)覽時(shí)可能會(huì)顯示錯(cuò)亂或異常,文件下載后無(wú)此問(wèn)題,請(qǐng)放心下載。
2. 本文檔由用戶上傳,版權(quán)歸屬用戶,天天文庫(kù)負(fù)責(zé)整理代發(fā)布。如果您對(duì)本文檔版權(quán)有爭(zhēng)議請(qǐng)及時(shí)聯(lián)系客服。
3. 下載前請(qǐng)仔細(xì)閱讀文檔內(nèi)容,確認(rèn)文檔內(nèi)容符合您的需求后進(jìn)行下載,若出現(xiàn)內(nèi)容與標(biāo)題不符可向本站投訴處理。
4. 下載文檔時(shí)可能由于網(wǎng)絡(luò)波動(dòng)等原因無(wú)法下載或下載錯(cuò)誤,付費(fèi)完成后未能成功下載的用戶請(qǐng)聯(lián)系客服處理。
关闭