資源描述:
《安防監(jiān)控-云存儲解決應(yīng)用案例》由會員上傳分享,免費在線閱讀,更多相關(guān)內(nèi)容在工程資料-天天文庫。
1、安防監(jiān)控海量數(shù)據(jù)云存儲總體解決方案1.項目背景隨著科技的發(fā)展,信息系統(tǒng)正在從以計算為核心轉(zhuǎn)向以數(shù)據(jù)為核心,海量存儲將成為國家信息化的核心組成部分。目前,信息資源呈兒何級數(shù)的速度增長,涉及的不僅包括文本、圖像,還有語音、視頻等多媒體信息。因此,眾多部門和單位都開始部署自己的數(shù)據(jù)中心,實現(xiàn)海量數(shù)據(jù)的集中式存儲、分析和共享。特別是如今倡導的“智慧城市”、“平安城市”的提出,數(shù)據(jù)中心的建設(shè)日益迫切,在安防領(lǐng)域存在著大量的卡口相機、高清視頻監(jiān)控探頭等,必然導致大量的視頻、圖像需要存儲,云存儲技術(shù)非常適合海量信息的存儲,因此能為信息中心提供很方便的解決方案,實現(xiàn)數(shù)據(jù)的集中
2、式存儲和共享。2.項目特點2.1數(shù)據(jù)量大視頻監(jiān)控系統(tǒng)…般具有攝像頭數(shù)量多,視頻圖像存儲吋間長,因此存儲容量需求很大,隨著視頻圖像存儲時間的增加,存儲容量需求呈線性、爆炸式的增長。因此視頻監(jiān)控系統(tǒng)存儲必須支持大容量,且容量具有高可擴展性,滿足長時間大容量視頻圖像存儲的需求。2.2長時間穩(wěn)定可靠要求由于攝像頭一般都是24小時工作的,即使流媒體文件采用分段保存的方式,寫入操作的持續(xù)時間也有可能長達多個個小時,而且,后期回放要保證一天24小吋提供服務(wù)。數(shù)據(jù)讀寫操作的持續(xù)吋間長。另外,對于安全性要求很高的數(shù)據(jù),耍防止出現(xiàn)異常情況,及時的實現(xiàn)數(shù)據(jù)容錯備災(zāi)。同時,自動的進行
3、設(shè)備的故障檢測,防范突發(fā)情況發(fā)生。因此,要求存儲系統(tǒng)具有超強的長時間工作能力,保證長期穩(wěn)定可靠的要求。2.3高集成度要求在項目中,目前數(shù)據(jù)中心要實現(xiàn)總?cè)萘?00T的要求,并且為方便以后擴展,要預(yù)留幾個機架。需耍在1個標準42U機架內(nèi)包含主控節(jié)點、備用主控節(jié)點、分布存儲節(jié)點,集成度高。2.4易于使用和維護要求要求使用者無需學習即可使用,不需經(jīng)過專業(yè)培訓和專門人員來維護。同時要求提供對存儲系統(tǒng)的網(wǎng)絡(luò)管理,操作簡便。2.5動態(tài)擴展要求由于監(jiān)控數(shù)據(jù)的增長很快,且?guī)в幸欢ǖ牟淮_定性,所以對于視頻監(jiān)控系統(tǒng)來說,擴展性是很重要的方面。該項目數(shù)據(jù)龐大,要求在可以在不停止服務(wù)的
4、情況下,根據(jù)項口進展情況,動態(tài)加入新的存儲節(jié)點或者摘除原存儲節(jié)點,在此過程中保證數(shù)據(jù)不丟失。3.解決方案3.1存儲結(jié)構(gòu)設(shè)計存儲系統(tǒng)采用主備2個元數(shù)據(jù)服務(wù)器和5個存儲節(jié)點構(gòu)成,使用2UX2、4UX5標準上架機器,安裝在1個標準42U機柜內(nèi)。整個系統(tǒng)的結(jié)構(gòu)如下圖所示:1?????????111i1I11111?1111a1111cStorcStorcStorcStorcStorcStor1111111■LinuxLinuxLinuxLinux1t11111LinuxorWindows111111111224血農(nóng)&j4ft1l11111L_.存儲節(jié)曲1111客戶端?
5、I雙管理節(jié)點即主元數(shù)據(jù)服務(wù)器節(jié)點和備份元數(shù)據(jù)服務(wù)器節(jié)點,支持主備雙機熱切換。元數(shù)據(jù)管理節(jié)點負責管理cStor云存儲系統(tǒng)的卷,存儲各文件的元數(shù)據(jù)信息,調(diào)度各數(shù)據(jù)存儲服務(wù)器。每個4U的存儲節(jié)點包含20塊2T硬盤,總?cè)萘抗灿?X20X2TB二200TB。3.2可靠性設(shè)計在cStor云存儲系統(tǒng)屮采用下面兩種可靠性保障機制,保證數(shù)據(jù)的安全可靠。?兀余備份在該項目中cStor采取的容錯機制是通過1:1的冗余備份的方式實現(xiàn)云存儲系統(tǒng)的可靠保證。備份因子可以根據(jù)服務(wù)的可靠性需求做動態(tài)的調(diào)整。服務(wù)啟動后,自動為每個數(shù)據(jù)塊做了一個備份副本。系統(tǒng)自動將源文件與副本存在不同的存儲節(jié)點
6、,實現(xiàn)了冗余備份。對于每一個chunk,必須將所有的副本全部寫入成功,才視為成功寫入。在其后的過程中,如果相關(guān)的副本出現(xiàn)丟失或不可恢復(fù)等狀況,MasterServer會自動將副木復(fù)制到其他ChunkServer上,從而滿足高度可靠的需求。?分級動態(tài)存儲方式cStor存儲系統(tǒng),采用了分級技術(shù),把存儲信息根據(jù)信息的重要性、訪問頻率等對信息進行了分級存儲,將文件的元數(shù)據(jù)等訪問頻繁的重要信息時刻保持在線存儲,開機后保存在內(nèi)存中,可以隨吋讀取和修改,以滿足前端應(yīng)用服務(wù)器或數(shù)據(jù)庫對數(shù)據(jù)訪問的速度耍求。將其它備份數(shù)據(jù)、冗余容錯的數(shù)據(jù)等訪問量小的數(shù)據(jù)等采用廉價的SATA硬盤存
7、儲。對于訪問量小的數(shù)據(jù)采用離線存儲,一旦需要訪問這些數(shù)據(jù)可以使用相應(yīng)的喚醒策略來實現(xiàn)將離線轉(zhuǎn)為在線。3?3網(wǎng)絡(luò)部署方案按照總?cè)萘?00T可用的用戶要求,最終設(shè)計狀態(tài)如下圖所示:設(shè)備清單:序號設(shè)備名稱設(shè)備規(guī)格用量1主元數(shù)據(jù)服務(wù)器2U標準型8盤位存儲服務(wù)器12備份元數(shù)據(jù)服務(wù)器2U標準型8盤位存儲服務(wù)器13存儲節(jié)點4U標準型20盤位存儲設(shè)備54硬盤2TB硬盤1005交換機24口千兆交換機26KVMLED液晶切換器1742U標準機柜42U網(wǎng)絡(luò)服務(wù)器機柜1產(chǎn)品配置性能列表:號型?置己0型準標型強增上元數(shù)據(jù)服務(wù)器CPU上以0G2.核4路雙存內(nèi)3RDG23盤EC硬源電0W7
8、2余冗1X+源電0W72余冗11+11