發(fā)簡(jiǎn)信
IP屬地：遼寧
-
土味兒說明數(shù)據(jù)治理-主數(shù)據(jù)&參考數(shù)據(jù)（參考數(shù)據(jù)）一，前言 主數(shù)據(jù)和參考數(shù)據(jù)在我們數(shù)據(jù)開發(fā)或者JavaWeb開發(fā)的同學(xué)都有經(jīng)常接觸盐捷，并且是大量的使用和分析場(chǎng)景乡范，在數(shù)據(jù)治理中提到的一些專業(yè)名詞在數(shù)...
-
0）Hive解析Ngxin日志中的時(shí)間
時(shí)間格式 ：04/Jun/2021:22:11:18 +0800這個(gè)時(shí)間是個(gè)并非Nginx的標(biāo)準(zhǔn)時(shí)間格式 雏胃，原始的為 ：[04/Jun/2021...
-
sparkStreaming使用zookeeper管理KafkaOffset方案
天地四方皆江湖俺孙，世人聰明反糊涂车胡。名利場(chǎng)上風(fēng)浪起嘴拢，贏到頭來卻是輸。----俠客行 先上maven依賴 先來個(gè)sparkStreaming的啟動(dòng)程序...
-
FlinkAPI硬核推薦
因?yàn)樽罱?xiàng)目需求胳喷，需要使用Flink框架做一個(gè)實(shí)時(shí)數(shù)倉湃番，其中用到了kafka，redis吭露，hbase吠撮，mysql，flink.但面臨的問題是我沒...
-
CDH6.2/6.3安裝Flink
Flink安裝包下載地址 接下來只需三步操作 然后再CDH集權(quán)檢查新的parcel就會(huì)出現(xiàn)flink了如果檢查不到新的 parcel讲竿，就把CM重...
-
大數(shù)據(jù)sqoop導(dǎo)入導(dǎo)出及環(huán)境變量配置
1泥兰，檢查是否裝了JDK，JDK版本建議（必須）在1.8或以上题禀，如果沒有裝JDK鞋诗，sqoop提交運(yùn)行的時(shí)候，使用的jre會(huì)報(bào)錯(cuò) 2迈嘹，檢查/etc/...
-
開發(fā)環(huán)境搭建CDH
CDH安裝筆記 安裝CDH我們需要做的幾件事： 溫馨提示：不要一步一步照抄 1 削彬，選擇centos對(duì)應(yīng)版本的CDH安裝包（我選擇的系統(tǒng)是： ce...