對于海量數(shù)據(jù)的思考
一泣港、MySQL體系結(jié)構(gòu)是否適合大數(shù)據(jù)存儲、計算
二价匠、HTAP-TIDB解決方案輕松應(yīng)對100億級別AP+TP業(yè)務(wù)
1.各行業(yè)數(shù)據(jù)量增長的現(xiàn)狀
有望達(dá)到18300億元当纱,年復(fù)合增速高達(dá)25%,我國邊緣計算發(fā)展將在接下來的兩年迎來高峰期霞怀。
到2020年惫东,平均下來莉给,一個人每天會產(chǎn)生1.5G的數(shù)據(jù)毙石,每輛車會產(chǎn)生4TB的數(shù)據(jù)廉沮,每架飛機(jī)會產(chǎn)生40TB的數(shù)據(jù),每個小型的工廠會產(chǎn)生1PB數(shù)據(jù).
2.海量數(shù)據(jù)徐矩,給企業(yè)帶來的挑戰(zhàn)
容量挑戰(zhàn)
并發(fā)挑戰(zhàn)
擴(kuò)容挑戰(zhàn)
數(shù)據(jù)孤島
實時計算(T+0)
3.海量數(shù)據(jù)滞时,給企業(yè)帶來的機(jī)遇()
用戶畫像
實時決策
成本控制
傳統(tǒng)解決方案:TP+AP+ETL-1
傳統(tǒng)解決方案:TP+AP+ETL-2
傳統(tǒng)解決方案:TP+AP+ETL-3
傳統(tǒng)解決方案:TP+AP+ETL-4
一、MySQL體系結(jié)構(gòu)是否適合大數(shù)據(jù)存儲滤灯、計算
1.MySQL CIS工作模型
彩蛋:MySQL進(jìn)程坪稽、線程工作模式,高并發(fā)下怎么破?
連接池
堆硬件
堆實例
讀寫分離
分庫分表