馬云淘寶五年風(fēng)雨路.pdf

《馬云淘寶五年風(fēng)雨路.pdf》由會(huì)員上傳分享，免費(fèi)在線閱讀，更多相關(guān)內(nèi)容在行業(yè)資料-天天文庫(kù)。

1、Taobao數(shù)據(jù)庫(kù)這5年@tb丁原2012-04-10DTCC2012DTCC2012索引?Taobao數(shù)據(jù)庫(kù)這5年?MySQL化面臨的問(wèn)題及應(yīng)對(duì)DTCC2012DTCC2012weibo上的討論DTCC2012DTCC2012為什么選擇開源（MySQL）?成本驅(qū)動(dòng)?公司自身技術(shù)積累，商業(yè)軟件在淘寶優(yōu)勢(shì)逐步弱化?其他客觀條件上面3點(diǎn)，哪點(diǎn)是決定性的？DTCC2012DTCC2012成本高，到底有多高剛開始買服務(wù)器（拿個(gè)袋子就去了）后來(lái)的成本（得用大卡車運(yùn)錢去）DTCC2012DTCC2012成本高，到底有多高某業(yè)務(wù)真實(shí)的數(shù)據(jù)

2、：2010年DB+硬件的投入在1100萬(wàn)左右。2011年DB+硬件的投入在2200萬(wàn)左右。2012年DB+硬件的投入在4400萬(wàn)左右。備注：沒(méi)有不差錢的公司這單單只是某個(gè)業(yè)務(wù)的壓力，可想整體成本的壓力有多大既然這么貴，我們?yōu)槭裁床粐L試免費(fèi)的呢DTCC2012DTCC2012選擇開源初期面臨的挑戰(zhàn)團(tuán)隊(duì)內(nèi)部(dba)：1.團(tuán)隊(duì)人員非常，非常擅長(zhǎng)商業(yè)db2.對(duì)開源db的理解一窮二白，需要快速積累，放棄你最熟悉的，選擇重新開始3.原有思維方式固化，改變需要時(shí)間4.其他團(tuán)隊(duì)外部(除dba之外的)：1.為什么要擁抱開源，好處在哪兒2.用

3、了開源軟件，dba還是最專業(yè)的嗎？3.打破原有集中式的思維，換一種方式，同時(shí)還要考慮更多的東西4.其他--擁抱變化http://media.ifeng.com/news/newmedia/web/201002/0206_4266_1539529.shtmlDTCC2012DTCC2012推進(jìn)過(guò)程?強(qiáng)推，阻力大？?一蹴而就還是按部就班，幾年幾年必須要完成？1.嘗試階段（小業(yè)務(wù)，小范圍開始）2.積累階段（使用過(guò)程中開發(fā)，dba面臨的問(wèn)題，解決問(wèn)題）3.繼續(xù)積累，驗(yàn)證（解決新的問(wèn)題，逐步推廣到更多的業(yè)務(wù)線）4.大規(guī)?？捎秒A段DTC

4、C2012DTCC2012關(guān)鍵點(diǎn)開發(fā)易用性：成熟的中間層，盡量減少開發(fā)的難度DBA易運(yùn)維：強(qiáng)大的MySQL底層運(yùn)維平臺(tái)其他：思想統(tǒng)一，協(xié)作，配合DTCC2012DTCC2012關(guān)于現(xiàn)在，未來(lái)1.關(guān)于成本開源&&商業(yè)解決方案，那個(gè)成本更加昂貴，現(xiàn)在我們很難知道，各有各的說(shuō)法，但是未來(lái)一定是開源軟件的（愛是做出來(lái)的，做了就一定有機(jī)會(huì)看到）。2.定制化開源軟件的趨勢(shì)（hbase，mysql，hadoop，linux內(nèi)核。。。）3.DTCC2012DTCC2012MySQL的淘寶歷史年份階段重要項(xiàng)目（里程碑）2008年嘗試階段始于畫

5、報(bào)（poster）項(xiàng)目Tddl中間層zdatasource數(shù)據(jù)源-2010年發(fā)展階段MySQL監(jiān)控逐步成熟核心業(yè)務(wù)有計(jì)劃的開始往MySQL上遷移-現(xiàn)在繼續(xù)發(fā)展階MySQL秒級(jí)別故障切換段MySQLsemisync，onlineddl，myawr定制自己的MySQL，徹底擁抱開源核心業(yè)務(wù)全部遷移到MySQLdb上NoSQL尤其hbase成為db的有力補(bǔ)充DTCC2012DTCC2012MySQL線上服務(wù)器統(tǒng)計(jì)DTCC2012DTCC2012這5年，數(shù)據(jù)存儲(chǔ)產(chǎn)品比例100908070商業(yè)db60開源db50NoSQL403020

6、10020072008200920102011存儲(chǔ)趨勢(shì)上：集中式，分布式，云？DTCC2012DTCC2012索引?Taobao數(shù)據(jù)庫(kù)的這5年?MySQL化面臨的問(wèn)題以及應(yīng)對(duì)DTCC2012DTCC2012商業(yè)DBvsMySQL商業(yè)db，MySQL各自的優(yōu)缺點(diǎn)，適用場(chǎng)景？DTCC2012DTCC2012商業(yè)DBvsMySQL商業(yè)軟件?穩(wěn)定，功能非常強(qiáng)大，代碼非常嚴(yán)謹(jǐn)，不會(huì)出現(xiàn)低級(jí)的bug?license貴，軟件黑盒子?確實(shí)非常非常好用開源軟件?輕量級(jí)數(shù)據(jù)庫(kù)（連接線程級(jí)別）?擴(kuò)展性好，可以針對(duì)具體業(yè)務(wù)場(chǎng)景進(jìn)行定制?地雷多（比如

7、ddl出現(xiàn)丟表的情況）商業(yè)軟件可能適合傳統(tǒng)業(yè)務(wù)類型，對(duì)數(shù)據(jù)庫(kù)穩(wěn)定性要求非常高的業(yè)務(wù)。MySQL可能適合于變化非?？斓幕ヂ?lián)網(wǎng)，數(shù)據(jù)量急劇膨脹，但數(shù)據(jù)的重要性相對(duì)不那么care。那，那，那我們屬于哪一類？DTCC2012DTCC2012使用MySQL,你有什么顧慮使用MySQL會(huì)有很多顧慮，開發(fā)的顧慮，dba的疑慮，沒(méi)有關(guān)系，我們來(lái)一起解決。?MySQL會(huì)丟數(shù)據(jù)嗎?MySQL容災(zāi)快速切換方案?MySQL的性能怎么樣?MySQL開源軟件自身的穩(wěn)定性怎么樣?MySQLddl鎖表（阻塞寫）怎么解決?MySQL備庫(kù)同步延遲，備庫(kù)跟不上主

8、庫(kù)?MySQL主備庫(kù)數(shù)據(jù)的一致性校驗(yàn)?相比商業(yè)軟件成熟的解決方案，MySQL+PC架構(gòu)其高可用如何保證DTCC2012DTCC2012MySQL會(huì)丟數(shù)據(jù)嗎丟數(shù)據(jù)場(chǎng)景：1.MySQL數(shù)據(jù)庫(kù)down掉會(huì)丟嗎？2.Mysql服務(wù)器異常down掉（比如CPU，RAM損壞，淘寶這幾年發(fā)生的幾率不到5