前言 前段時間升級了windows臺式機葛碧,由于雙系統(tǒng)實在過于麻煩借杰,而且現(xiàn)在wsl2已經(jīng)很成熟了, 可以帶來比較好的windows上的開發(fā)體驗进泼, 但是在環(huán)境準備過程中還是有不少...
前言 前段時間升級了windows臺式機葛碧,由于雙系統(tǒng)實在過于麻煩借杰,而且現(xiàn)在wsl2已經(jīng)很成熟了, 可以帶來比較好的windows上的開發(fā)體驗进泼, 但是在環(huán)境準備過程中還是有不少...
前言 最近在搞520大促的事情绞惦,忙到腳不點地,所以就寫些簡單省事的吧洋措。 物化視圖概念 我們都知道济蝉,數(shù)據(jù)庫中的視圖(view)是從一張或多張數(shù)據(jù)庫表查詢導出的虛擬表,反映基礎表...
Flink容錯機制以及Chandy-Lamport算法 流式計算分為有狀態(tài)和無狀態(tài)兩種情況菠发,所謂狀態(tài)就是計算過程中的中間值王滤; 對于無狀態(tài)計算,會獨立觀察每個獨立事件雷酪,并根據(jù)最...
2019年天貓雙11再次刷新世界記錄淑仆,訂單創(chuàng)新峰值達到54.4萬筆/秒,單日數(shù)據(jù)處理量達到970PB哥力;支撐起這個雙十一狂歡神話是阿里強悍的數(shù)據(jù)云上系統(tǒng)蔗怠,這其中阿里的數(shù)據(jù)計算云...
內(nèi)容 sparkStreaming簡介 spark Streaming和Storm區(qū)別 Spark Streaming算子 Spark checkpointing Spark...
Spark簡介 Spark是專為大規(guī)模數(shù)據(jù)處理而設計的快速通用的計算引擎寞射;Spark擁有Hadoop MapReduce所具有的優(yōu)點渔工,但是運行速度卻比MapReduce有很大...
最近在新電腦上配置大數(shù)據(jù)開發(fā)環(huán)境,踩了不少坑桥温,更具網(wǎng)上的一些方法整理了一套比較簡單的hadoop+zookeeper+hbase+hive環(huán)境的搭建(由于虛擬機環(huán)境均以roo...