發(fā)簡(jiǎn)信
IP屬地：河南
-
一種spark application提交管理的工程化實(shí)踐背景描述 ??spark是一個(gè)優(yōu)秀的面向大數(shù)據(jù)的數(shù)據(jù)計(jì)算引擎规惰，并且針對(duì)不同的應(yīng)用場(chǎng)景，spark本身提供了一些很好的工具如對(duì)于數(shù)據(jù)分析計(jì)算我們可...
-
通過(guò)hive shell操作phoenix下的hbase表
環(huán)境配置 hive-2.3.2hbase-1.4.2phoenix-4.14.0-HBase-1.4spark-2.3.0-bin-hadoop...
-
獲取SQL分組中的第1條或topN條記錄
以mysql為例創(chuàng)建表項(xiàng) 插入測(cè)試記錄 查詢(xún)數(shù)據(jù)庫(kù)中記錄庐船，如下 需求1: 按照custom_id進(jìn)行分組，且每組按照date排序嘲更，然后獲取每組中...
-
hive執(zhí)行sql:stage-1 map = 0 reduce = 0
問(wèn)題描述：在hive shell中執(zhí)行sql,如insert into person_base1 select * from person_ba...
-
hive服務(wù)啟動(dòng)異常定位記錄
環(huán)境說(shuō)明 hadoop-2.7.4hive-2.3.2hbase-1.4.2jdk1.8.0_161 問(wèn)題現(xiàn)象原先啟動(dòng)hiveserver2和m...
-
hmaster啟動(dòng)異常解決記錄
環(huán)境背景在單臺(tái)云服務(wù)器上使用docker搭了一套簡(jiǎn)單的大數(shù)據(jù)開(kāi)發(fā)測(cè)試環(huán)境筐钟，1個(gè)master，2個(gè)slave,服務(wù)啟動(dòng)使用docker-compo...
-
centos安裝docker-compose
操作系統(tǒng)環(huán)境版本 docker-compose需使用pip安裝安裝命令 安裝python-pip遇到的錯(cuò)誤 混合安裝了el6與el7的packa...
-
使用docker快速搭建zookeeper集群學(xué)習(xí)環(huán)境
環(huán)境配置1.Ubuntu 14.04.3 LTS2.Docker version 17.05.0-ce3.docker-compose vers...