發(fā)簡信
IP屬地：遼寧
-
土味兒說明數(shù)據(jù)治理-主數(shù)據(jù)&參考數(shù)據(jù)（參考數(shù)據(jù)）一磷支，前言 主數(shù)據(jù)和參考數(shù)據(jù)在我們數(shù)據(jù)開發(fā)或者JavaWeb開發(fā)的同學(xué)都有經(jīng)常接觸梆造，并且是大量的使用和分析場景遂唧，在數(shù)據(jù)治理中提到的一些專業(yè)名詞在數(shù)...
-
0）Hive解析Ngxin日志中的時(shí)間
時(shí)間格式 ：04/Jun/2021:22:11:18 +0800這個(gè)時(shí)間是個(gè)并非Nginx的標(biāo)準(zhǔn)時(shí)間格式 屑那，原始的為 ：[04/Jun/2021...
-
sparkStreaming使用zookeeper管理KafkaOffset方案
天地四方皆江湖侄旬，世人聰明反糊涂互妓。名利場上風(fēng)浪起囱持，贏到頭來卻是輸。----俠客行 先上maven依賴 先來個(gè)sparkStreaming的啟動(dòng)程序...
-
FlinkAPI硬核推薦
因?yàn)樽罱?xiàng)目需求闲擦，需要使用Flink框架做一個(gè)實(shí)時(shí)數(shù)倉糖驴，其中用到了kafka僚祷，redis，hbase贮缕，mysql辙谜，flink.但面臨的問題是我沒...
-
CDH6.2/6.3安裝Flink
Flink安裝包下載地址 接下來只需三步操作 然后再CDH集權(quán)檢查新的parcel就會(huì)出現(xiàn)flink了如果檢查不到新的 parcel，就把CM重...
-
大數(shù)據(jù)sqoop導(dǎo)入導(dǎo)出及環(huán)境變量配置
1感昼，檢查是否裝了JDK装哆，JDK版本建議（必須）在1.8或以上，如果沒有裝JDK定嗓，sqoop提交運(yùn)行的時(shí)候蜕琴，使用的jre會(huì)報(bào)錯(cuò) 2，檢查/etc/...
-
開發(fā)環(huán)境搭建CDH
CDH安裝筆記 安裝CDH我們需要做的幾件事： 溫馨提示：不要一步一步照抄 1 宵溅，選擇centos對(duì)應(yīng)版本的CDH安裝包（我選擇的系統(tǒng)是： ce...