資源描述:
《各公司使用的Ceph存儲集群》由會員上傳分享,免費(fèi)在線閱讀,更多相關(guān)內(nèi)容在行業(yè)資料-天天文庫。
1、....Ceph作為軟件定義存儲的代表之一,最近幾年其發(fā)展勢頭很猛,也出現(xiàn)了不少公司在測試和生產(chǎn)系統(tǒng)中使用Ceph的案例,盡管與此同時(shí)許多人Ceph作為軟件定義存儲的代表之一,最近幾年其發(fā)展勢頭很猛,也出現(xiàn)了不少公司在測試和生產(chǎn)系統(tǒng)中使用Ceph的案例,盡管與此同時(shí)許多人對它的抱怨也一直存在。本文試著整理作者了解到的一些使用案例。1.攜程(Ctrip)攜程所使用的各種存儲的現(xiàn)狀:·商業(yè)存儲:·SAN(HP/HPS),1+PB,數(shù)據(jù)庫·NAS(HW),800+TB,文件共享開源存儲·GlusterFS,1+PB,數(shù)據(jù)庫備份·FastDFS,?1+PB,海量照片·HDFS
2、,???10+PB,大數(shù)據(jù)而在不久的將來,隨著公司業(yè)務(wù)的發(fā)展,攜程需要的存儲容量需要擴(kuò)大到10倍以上。攜程選擇Ceph的理由:低成本+SDS+Scale-out+統(tǒng)一存儲+企業(yè)特性學(xué)習(xí)資料....?攜程目前的Ceph集群的配置:·CephVersion:0.94.2,Hrelease·ObjectStorage:RGW+SwiftAPI·SDK:Python/Java/C#/Ruby·OS:Centos6.4·硬件:CPU(2channels&32Core)、Mem128GB、disk(12*3TB/SATAdisk+2*256GBraid1SSD)、NIC(4*Gi
3、gabitLAN,bond2in1pair)RGW使用架構(gòu):學(xué)習(xí)資料....攜程有在數(shù)據(jù)中心之間的同步數(shù)據(jù)的需求。在研究了CRUSHmap、Radosgw-agent、Federategateway(不穩(wěn)定、不靈活(只支持Zone之間同步)、不易擴(kuò)展)后,其自研了COS方案,它具有穩(wěn)定、靈活、擴(kuò)展性等特點(diǎn):學(xué)習(xí)資料....?下一步的計(jì)劃:·DatabaseonCeph(Dev&QAFarm)·Openstack/DockerIntegratewithCeph·IT“Dropbox”資料來源:攜程在2015/10/18SHCephDay上的分享。樓主點(diǎn)評:·與互聯(lián)網(wǎng)公司
4、的通常做法一致:慎重選擇、細(xì)致測試、分布使用(往往從開發(fā)測試環(huán)境中使用開始)、開源的不夠用就自研學(xué)習(xí)資料....·希望攜程能有更多的分享和回饋社區(qū)2.聯(lián)通研究院中國聯(lián)通研究院在使用Ceph對象和文件存儲:?該集群還比較小,更多的是處于做大規(guī)模使用前的準(zhǔn)備階段。其測試環(huán)境:?測試結(jié)果:學(xué)習(xí)資料....他們認(rèn)為SSD對性能提升的效果一般:資料來源:聯(lián)通研究院在2015/10/18SHCephDay上的分享。樓主點(diǎn)評:·尚處于小規(guī)模測試和試用階段·使用的測試方法或者調(diào)優(yōu)手段可能沒到位,不然性能提高不會那么少3.寶德云(PLCloud)寶德云使用Ceph的理由:·PureSo
5、ftware·OpenSource,CommercialSupport·UnifiedStorage:RBD,RGW,CephFS學(xué)習(xí)資料....·ScaleOut·SelfHealing·ReplicationandErasureCoding·IntegratewellwithOpenStack寶德云的用法:OpenStack+Ceph(RDB,CephFS)+Docker·所有OpenStack存儲都放在Ceph上·18*(5OSD+1SSD)/CephRBD/CephFS·785VM/4vCPU32GBperVM·Ubuntu14.04/Docker1.6.1/
6、150+ContainersperVM·AllVMMountCephFS·MountVMDirectoryasContainer’sDataVolume·Boot1VM<5s·Boot1Container<1s·Boot150+Containers<120s·CephRadosGatewaydriverforDockerRegistry·??MapRBDdeviceinsideDockerContainer·CephFSasDataVolume·??CephFSasNASStorage·RunCephinContainers使用案例:寶德云上的愛慕流媒體服務(wù)·Runm
7、ediaweb/app/dbvmoverOpenStackandCephRBD·UseCephRGWasmediaresourcestorage·PutvideoTransportStream/jpgfileviac-languageprogramme·Manageresourceviapython-swiftclient·400+KBpervideotsfile·Reservedvideots/jpgfile7daysor30days學(xué)習(xí)資料....·Allowmediaservertemporaryaccesstoobjects·Providem