1.問題原因 主要時間消耗在往MyBatis中批量插入數(shù)據(jù)家卖。mapper configuration是用foreach循環(huán)做的盆犁,經(jīng)過項目實踐發(fā)現(xiàn),當(dāng)表的列數(shù)較多(20+...
1.數(shù)倉分層概述 數(shù)據(jù)倉庫分為三層篡九,自下而上為:數(shù)據(jù)引入層(ODS谐岁,Operation Data Store)數(shù)據(jù)公共層(CDM,Common Data Model)數(shù)據(jù)應(yīng)用...
1看靠、map:將集合中每個元素乘以2 scala實現(xiàn): java實現(xiàn): 2赶促、filter:過濾出集合中的偶數(shù) scala實現(xiàn): java實現(xiàn): 3、flatMap:將行拆分為單...
1. Spark是什么 Spark挟炬,是一種通用的大數(shù)據(jù)計算框架鸥滨,正如傳統(tǒng)大數(shù)據(jù)技術(shù)Hadoop的MapReduce、Hive引擎辟宗,以及Storm流式實時計算引擎等爵赵。Spark...
Flink基礎(chǔ) flink的安裝: 如果為單機環(huán)境,直接從flink官網(wǎng)下載最新的flink包解壓即可但两。 下載地址:https://flink.apache.org/down...