IP屬地:浙江
*使用canal采集mysql的binlog禁谦,輸出到kafka,然后使用flinksql消費(fèi)kafka,并輸出到屏幕 mysql需要開始binl...
github地址:https://github.com/ververica/flink-cdc-connectors Flink CDC Con...
flink1.11發(fā)布以來晚岭,很多人就很關(guān)心hive倉庫實(shí)時化。所以自己也試著嘗試一下卫键,然而遇到很多環(huán)境問題领曼。 環(huán)境準(zhǔn)備好之后,先在本地測試一下,...
MemoryStateBackend 狀態(tài)數(shù)據(jù)保存在taskmanager的內(nèi)存中搀玖,所以程序能夠使用狀態(tài)的大小受限于taskmanager的內(nèi)存...
eventTime eventTime根據(jù)事件中的某個字段指定(assignTimestampsAndWatermarks) watermark...
感覺這種場景還是挺有用的,經(jīng)過在本地和yarn上測芳来,沒問題