資源描述:
《基于CloudFoundry的私有云平臺(tái)》由會(huì)員上傳分享,免費(fèi)在線閱讀,更多相關(guān)內(nèi)容在教育資源-天天文庫(kù)。
1、基于CloudFoundry的私有云平臺(tái)@王煒煜,百度運(yùn)維部weibo.com/wwy16402013-7-19內(nèi)容背景與目標(biāo)實(shí)踐與改造(Part1、2)流程與標(biāo)準(zhǔn)改變運(yùn)維未來(lái)計(jì)劃1.背景與目標(biāo)運(yùn)維與PaaSStorageServersNetworkingO/SMiddlewareVirtualizationDataApplicationsRuntimeOP(SRE),運(yùn)維PaaS(andIaaS)目標(biāo)自動(dòng)化業(yè)務(wù)的生命周期管理,如變更、監(jiān)控、故障處理等資源利用率、彈性標(biāo)準(zhǔn)化流程實(shí)例標(biāo)準(zhǔn)系統(tǒng)環(huán)境、runtime、framework一體
2、化集成第三方服務(wù),如DB、Cache、log、FS等與其他系統(tǒng)平臺(tái)聯(lián)動(dòng)WhyCloudFoundry?自動(dòng)化標(biāo)準(zhǔn)化一體化機(jī)器管理(下游部門)自動(dòng)化一體化標(biāo)準(zhǔn)化WhyCF?自動(dòng)化一體化標(biāo)準(zhǔn)化2.實(shí)踐與改造(Part1)Java,baseoncf1.0JavaApps產(chǎn)品種類>100APP>200實(shí)例>2000平均單實(shí)例10G(內(nèi)存)日均總pv>10億APP的開發(fā)及測(cè)試人員>700人Tomcat5/6/7、jdk1.5/1.6、Standalone開始實(shí)施,準(zhǔn)備工作基于CentOS的相關(guān)改造獨(dú)立部署各個(gè)CF組件拆解BOSH、chef,基
3、于物理機(jī)實(shí)施OS環(huán)境初始化apt-get改為yumUbuntu-cmdtoCentOSDEA(v1.0),agent.rb、secure.rbyuminstall-ymakegccgcc-c++kernel-devel.x86_64openssl-devel.x86_64libxml2.x86_64libxml2-devel.x86_64libxslt.x86_64libxslt-devel.x86_64git.x86_64sqlite.x86_64ruby-sqlite3.x86_64sqlite-devel.x86_64unzi
4、p.x86_64zip.x86_64ruby-devel.x86_64ruby-mysql.x86_64mysql-devel.x86_64curl-devel.x86_64postgresql-libs.x86_64postgresql-devel.x86_64zlib-devel.x86_64readline-devel.x86_64ImageMagick.x86_64ImageMagick-devel.x86_64php-magickwand.x86_64集群容量評(píng)估實(shí)例數(shù)量,NATS容量評(píng)估單臺(tái)DEA承載的實(shí)例數(shù)(<100)
5、,對(duì)NATS-Server壓力影響不大單NATS-Server,保守估計(jì)可承受330臺(tái)DEA,單臺(tái)實(shí)例數(shù)5~30個(gè)多NATS-Server,可擴(kuò)展延時(shí)(ms)DEA臺(tái)數(shù)(10~340臺(tái))單DEA實(shí)例數(shù)(5~30個(gè))臨界線330臺(tái)DEA集群內(nèi),組件冗余、LB設(shè)計(jì)NATS使用cluster版,多NATS,心跳同步Client端緩存信息,如果網(wǎng)絡(luò)中斷,則不斷reconnect多NATS負(fù)載均衡(Client>0.5.beta.6)NATS-Server1NATS-Server2NATS-Client(cachingmessage)NATS
6、-Server1/2,Randomlist多集群冗余設(shè)計(jì)多個(gè)獨(dú)立的集群,邏輯互不影響第一層切換,修改DNSA記錄,對(duì)多個(gè)域名(CNAME到此A記錄),統(tǒng)一切到不同的集群第二層切換,修改“接入層”(其應(yīng)用層的功能,可簡(jiǎn)單理解為nginx的反向代理)保證好APP(無(wú)狀態(tài))的容量,或快速擴(kuò)容的預(yù)案,以防止流量切過(guò)來(lái)以后,出現(xiàn)過(guò)載BaiduGateWayFrontEndRouterA記錄BaiduGateWayFrontEndRouterapp1app1CNAME(正式域名)CNAME(正式域名)www.baidu.comCNAMEwww.
7、a.shifen.com.www.baidu.cnCNAMEwww.a.shifen.com.www.a.shifen.com.A119.75.218.77www.a.shifen.com.A119.75.217.56核心組件,分布Router_1NATS_1RouterNATSCCHMStagerDEAPG_DBRedis整體結(jié)構(gòu)(cf1.0)DEALoggingNameServiceMonitoringjvmStagerFilePersistenceHMRouterCCBaiduGateWay/FrontEndjvmjvmAPI
8、BridgeUAAjvmjvmjvmjvmjvmRouter(Cluster02)NATSDB新增功能支持RPC、單實(shí)例多端口單實(shí)例開啟多個(gè)端口,并提供API實(shí)時(shí)查詢IP、端口號(hào)與“名稱服務(wù)”聯(lián)動(dòng),同步動(dòng)態(tài)ip端口與名稱的對(duì)應(yīng)關(guān)系RP