曙光xdata-hadoop大數(shù)據(jù)軟件

《曙光xdata-hadoop大數(shù)據(jù)軟件》由會(huì)員上傳分享，免費(fèi)在線閱讀，更多相關(guān)內(nèi)容在工程資料-天天文庫。

1、曙光XData-Hadoop大數(shù)據(jù)軟件信息技術(shù)的發(fā)展帶來數(shù)據(jù)的爆炸性增長，這對(duì)數(shù)據(jù)的采集、傳輸、存儲(chǔ)、分析和安全等技術(shù)應(yīng)用和管理工作提出了挑戰(zhàn)，傳統(tǒng)的分析體系結(jié)構(gòu)已經(jīng)遇到了瓶頸。Hadoop正是為解決這樣的問題而誕生的，其底層的分布式文件系統(tǒng)具有高擴(kuò)展性，通過數(shù)據(jù)冗余保證數(shù)據(jù)不丟失和提高計(jì)算效率，并可以存儲(chǔ)各種格式的數(shù)據(jù)。同時(shí)其還支持多種計(jì)算框架，既可以進(jìn)行離線計(jì)算也可以進(jìn)行在線實(shí)時(shí)計(jì)算。XData-Hadoop大數(shù)據(jù)軟件是曙光公司在當(dāng)前大數(shù)據(jù)時(shí)代背景下，以開源特點(diǎn)：Hadoop版本為基礎(chǔ)，對(duì)其穩(wěn)定

2、性和性能進(jìn)行大量的改進(jìn)和優(yōu)化，自主研發(fā)便捷高效的管理運(yùn)維系統(tǒng)，為用戶提供穩(wěn)定、可靠、易用的企業(yè)級(jí)Hadoop系統(tǒng)，?經(jīng)實(shí)際驗(yàn)證的企業(yè)級(jí)助力用戶掘金大數(shù)據(jù)。Hadoop版本?提供客戶必需的管理和監(jiān)控功能產(chǎn)品概述?可以針對(duì)客戶的需求曙光XData-Hadoop是以開源Hadoop為基礎(chǔ)，提供了一個(gè)能夠?qū)Ａ繑?shù)據(jù)進(jìn)開發(fā)新的平臺(tái)功能行分布式處理的軟件框架，為處理多樣化數(shù)據(jù)提供了一個(gè)超越傳統(tǒng)技術(shù)的解決方案。曙光XData-Hadoop包含了大數(shù)據(jù)生態(tài)圈中的主流組件，并在高可用、?具有強(qiáng)大的解決方案安全、易管理

3、、性能等方面進(jìn)行了大量的優(yōu)化，讓企業(yè)可以更快、更準(zhǔn)、更穩(wěn)配套能力定的從各類繁雜無序的海量數(shù)據(jù)中挖掘價(jià)值。頁碼：1版本1.0曙光海量數(shù)據(jù)處理系統(tǒng)XData-Hadoop大數(shù)據(jù)軟件規(guī)格列表XData-Hadoop大數(shù)據(jù)軟件HDFS：分布式文件系統(tǒng)，能力提供高吞吐量的數(shù)據(jù)訪問能力MapReduce：分布式數(shù)據(jù)處理框架，提供能夠快速批量處理海量數(shù)據(jù)的能力Yarn：Hadoop通用資源管理系統(tǒng)，可以支持MapReduce、Spark等計(jì)算框架Zookeeper：提供分布式、高可用性的協(xié)調(diào)服務(wù)能力，避免系統(tǒng)的單

4、點(diǎn)故障HBase：構(gòu)建在HDFS上的分布式、面向列的分布式數(shù)據(jù)庫系統(tǒng)Hive：Hadoop之上的數(shù)據(jù)倉庫，對(duì)外提供類SQL的語言來操作結(jié)構(gòu)化數(shù)據(jù)Hue：提供Hadoop組件的Web界面，通過瀏覽器圖形化訪問操作各組件包含組件Spark：是一種整合了內(nèi)存計(jì)算的可擴(kuò)展的數(shù)據(jù)分析平臺(tái)Thrift：一種軟件框架，提供可擴(kuò)展且跨語言的服務(wù)開發(fā)能力XData-ETL：從數(shù)據(jù)源抽取數(shù)據(jù)，并進(jìn)行清洗入庫的數(shù)據(jù)預(yù)處理工具，該工具基礎(chǔ)的代碼使用Java開發(fā)，基于Hue實(shí)現(xiàn)了數(shù)據(jù)從指定節(jié)點(diǎn)、支持HDFS、FTP/SFTP

5、、傳統(tǒng)數(shù)據(jù)庫、HBase之間的相互導(dǎo)入、導(dǎo)出，設(shè)計(jì)了一套對(duì)HDFS上的文件進(jìn)行MapReduce的數(shù)據(jù)數(shù)據(jù)檢查、數(shù)據(jù)轉(zhuǎn)化的語言XData-Manager：可視化集群管理工具，圖形化任務(wù)腳本提交工具CentOS6X86/X86_64運(yùn)行環(huán)境操作系統(tǒng)RedHat6X86/X86_64訪問接口與開源Hadoop訪問接口完全兼容自動(dòng)部署支持向?qū)讲渴鸷鸵绘I式部署參數(shù)配置專家推薦參數(shù)，圖形化配置服務(wù)控制支持便捷的服務(wù)啟停和控制系統(tǒng)功能系統(tǒng)升級(jí)支持在用戶業(yè)務(wù)不停止的情況下在線升級(jí)，升級(jí)過程對(duì)原有數(shù)據(jù)和配置無影響

6、狀態(tài)監(jiān)控支持對(duì)系統(tǒng)總體狀態(tài)進(jìn)行監(jiān)控，支持對(duì)各節(jié)點(diǎn)和服務(wù)狀態(tài)進(jìn)行監(jiān)控性能監(jiān)控支持對(duì)系統(tǒng)總體性能、資源進(jìn)行監(jiān)控，以及各節(jié)點(diǎn)的性能、資源進(jìn)行監(jiān)控支持對(duì)系統(tǒng)軟硬件故障和系統(tǒng)狀態(tài)閥值信息進(jìn)行告警，告警方式支持以界面告警、系統(tǒng)告警郵件告警和短信告警等方式頁碼：2版本1.0曙光海量數(shù)據(jù)處理系統(tǒng)XData-Hadoop大數(shù)據(jù)軟件規(guī)格列表穩(wěn)定性經(jīng)過客戶驗(yàn)證的企業(yè)級(jí)Hadoop版本，穩(wěn)定可靠便捷性具有圖形化安裝、管理、監(jiān)控工具，自動(dòng)進(jìn)行集群配置優(yōu)化優(yōu)勢(shì)易用性快速地存儲(chǔ)、整合和管理不同類型的大容量數(shù)據(jù)安全性隔離用戶計(jì)算資

7、源、存儲(chǔ)資源XData-Hadoop是企業(yè)級(jí)大數(shù)據(jù)存儲(chǔ)、查詢、分析的統(tǒng)一平臺(tái)，幫助企業(yè)快速構(gòu)建海量數(shù)據(jù)信息處理系統(tǒng)，通過對(duì)各類海量數(shù)據(jù)信息實(shí)時(shí)和非實(shí)時(shí)的分析和挖掘，協(xié)助企業(yè)從海量信息中獲取數(shù)據(jù)的價(jià)值，及時(shí)洞察新的機(jī)會(huì)XData-HadoopManager提供圖形化的安裝、部署、運(yùn)維界面，全自動(dòng)化在線運(yùn)行維護(hù)、自定義報(bào)表、自動(dòng)報(bào)警等功能，讓企業(yè)可以輕松地管理大數(shù)據(jù)系統(tǒng)XData-Hadoop緊隨開源社區(qū)的最新技術(shù)，快速集成最新組件，并在管理性、可靠性、安全性方面進(jìn)行企業(yè)級(jí)的增強(qiáng)和持續(xù)改進(jìn)，始終保持技術(shù)

8、領(lǐng)先特點(diǎn)XData-Hadoop是完全開放的大數(shù)據(jù)平臺(tái)，可以為政府、軍工、廣媒、公安、工商、教育等行業(yè)中的大型企事業(yè)單位量身定制大數(shù)據(jù)解決方案，根據(jù)其需求對(duì)數(shù)據(jù)進(jìn)行建模和分析，為監(jiān)管、決策、營銷等各種業(yè)務(wù)場(chǎng)景提供應(yīng)用開發(fā)和技術(shù)支持XData-Hadoop團(tuán)隊(duì)具備提供大數(shù)據(jù)整體解決方案的能力，能為日志分析、客戶特征畫像、個(gè)性化推薦、歷史數(shù)據(jù)查詢、實(shí)時(shí)事件處理等典型的應(yīng)用場(chǎng)景提供一系列的解決方案，并跟隨客戶業(yè)務(wù)的發(fā)展不斷的豐富和完善XData-Hadoop團(tuán)隊(duì)具有強(qiáng)大的本