IP屬地：北京
-
MMA安裝及使用優(yōu)化1.背景 公司自建的Hadoop集群患雏，后期使用阿里的Maxcompute忱屑，就需要遷移數(shù)據(jù)到新環(huán)境中淡溯，阿里提供眾多的遷移方案湘换，在經(jīng)過我們的實(shí)踐后蚀苛，...
-
一個(gè)實(shí)戰(zhàn)讓你搞懂Dockerfile
摘要 在認(rèn)識(shí)Dockerfile的基礎(chǔ)功能之后仰担，即一個(gè)用基礎(chǔ)鏡像來構(gòu)建新鏡像的文本文件糊识，就需要在實(shí)際工作中使用其靈活便利的操作來提升我們的工作效...
-
YARN線上動(dòng)態(tài)資源調(diào)優(yōu)
背景 線上Hadoop集群資源嚴(yán)重不足，可能存在添加磁盤，添加CPU赂苗，添加節(jié)點(diǎn)的操作愉耙，那么在添加這些硬件資源之后，我們的集群是不能立馬就利用上這...
-
11.Flink實(shí)時(shí)項(xiàng)目之支付寬表
支付寬表 支付寬表的目的拌滋，最主要的原因是支付表沒有到訂單明細(xì)朴沿，支付金額沒有細(xì)分到商品上， 沒有辦法統(tǒng)計(jì)商品級(jí)的支付狀況鸠真。 所以本次寬表的核心就是...
-
Dockerfile入門
1.Dockerfile介紹 在之前Docker的使用中悯仙，我們直接從倉庫下載需要的鏡像到本地，然后稍加配置就可以應(yīng)用了吠卷，通常從倉庫下載下來的鏡像...
-
10.Flink實(shí)時(shí)項(xiàng)目之訂單維度表關(guān)聯(lián)1. 維度查詢 在上一篇中锡垄，我們已經(jīng)把訂單和訂單明細(xì)表join完，本文將關(guān)聯(lián)訂單的其他維度數(shù)據(jù)祭隔，維度關(guān)聯(lián)實(shí)際上就是在流中查詢存儲(chǔ)在 hbase ...
-
Docker提交鏡像-數(shù)據(jù)卷-可視化在熟悉完Docker的安裝及基本命令使用之后货岭，我們開始學(xué)習(xí)下Docker的進(jìn)階操作：包括但不限于新建Docker鏡像，數(shù)據(jù)卷的掛載疾渴，以及Dock...
-
9.Flink實(shí)時(shí)項(xiàng)目之訂單寬表1.需求分析 訂單是統(tǒng)計(jì)分析的重要的對(duì)象千贯，圍繞訂單有很多的維度統(tǒng)計(jì)需求，比如用戶搞坝、地區(qū)搔谴、商品、品類桩撮、品牌等等敦第。為了之后統(tǒng)計(jì)計(jì)算更加方便，減少大表...
-
Docker安裝與基本命令使用
Docker在CentOS上的安裝 官方文檔：https://docs.docker.com/engine/install/centos/[ht...