airflow的宏和變量可以用于模版（templates）。 默認(rèn)變量 所有的模版中都可以訪問(wèn)airflow引擎?zhèn)鬏斈J(rèn)的變量。 變量描述{{ ds }}the execut...
發(fā)簡(jiǎn)信
IP屬地：廣東
-
難不成是水軍摔认？
docker容器遷移-不丟失數(shù)據(jù)跨主機(jī)
docker容器遷移 最近買了一臺(tái)新電腦 因?yàn)椴幌氚褦?shù)據(jù)又重新新建導(dǎo)入一遍 想要把數(shù)據(jù)庫(kù)環(huán)境遷移到新電腦上 用到了docker遷移 用export&import 還是 sav...
-
@咬塵歸 ??
Apache Zeppelin 基于 kerberos 多租戶集成
0 前言 構(gòu)建大數(shù)據(jù)平臺(tái)初期，我們的數(shù)據(jù)分析師做數(shù)據(jù)開(kāi)發(fā)需要 ssh 到機(jī)器上，面對(duì)黑黑的 terminal 進(jìn)行開(kāi)發(fā)，為了提升開(kāi)發(fā)效率哑诊，架構(gòu)師讓我開(kāi)發(fā)一個(gè) hive 可視化...
-
由于109已經(jīng)成功更新journal node數(shù)據(jù)，導(dǎo)致110更新journal node 失敗及刻，然后110上的NameNode被殺死 -- 是什么意思镀裤。不是110先更新嗎
NameNode退出原因分析
一、背景 HDFS集群為HA模式缴饭，109節(jié)點(diǎn)為Standby 狀態(tài)暑劝，110節(jié)點(diǎn)為Active狀態(tài)。110 上的Active NameNode進(jìn)程突然異常退出颗搂，109 Name...
-
NameNode退出原因分析
一担猛、背景 HDFS集群為HA模式，109節(jié)點(diǎn)為Standby 狀態(tài)丢氢，110節(jié)點(diǎn)為Active狀態(tài)傅联。110 上的Active NameNode進(jìn)程突然異常退出，109 Name...
-
CentOS安裝openjdk11
1：搜索安裝包 2：安裝jdk11 3：查看當(dāng)前版本 4：設(shè)置JAVA_HOME （一）找到JAVA安裝目錄 如果顯示的是 /usr/bin/java 請(qǐng)執(zhí)行下面步驟 輸出應(yīng)...
-
想請(qǐng)問(wèn)下疚察，外部分區(qū)表可以直接在他的目錄下創(chuàng)建分區(qū)目錄然后把數(shù)據(jù)放過(guò)去然后msck嗎蒸走？ hive表存儲(chǔ)格式是orc，文件不是orc格式呀
HIVE常用命令之MSCK REPAIR TABLE命令簡(jiǎn)述
工作中發(fā)現(xiàn)很多同事連基礎(chǔ)的hive命令都不知道貌嫡，所以準(zhǔn)備寫(xiě)一個(gè)系列把hive一些常用的命令進(jìn)行一個(gè)總結(jié)比驻。第一個(gè)講的命令是MSCK REPAIR TABLE该溯。 MSCK REP...
-
哪里有番茄鐘 沒(méi)看到呀
一款可以始終懸浮的清單軟件，用起來(lái)非常舒服
追求極致的創(chuàng)作初衷嫁艇，一群技術(shù)宅開(kāi)發(fā)了閃點(diǎn)清單：一款可以始終懸浮在桌面的清單軟件朗伶。 它可以提供一個(gè)迷你懸浮窗始終懸浮在電腦桌面弦撩，提示你最重要的信息步咪，一鍵觸達(dá)你需要的功能，用起來(lái)...
-
哇 終于明白了
對(duì)RFC 3339的時(shí)間益楼、時(shí)區(qū)格式詳解
這是一個(gè)很小也很簡(jiǎn)單的事情猾漫，有些軟件工程師可能不清楚，但是把時(shí)間戳格式理解清楚對(duì)每個(gè)開(kāi)發(fā)工程師是很重要的一件事感凤。 前段時(shí)間內(nèi)我們?cè)跇?gòu)建一個(gè)項(xiàng)目悯周，對(duì)于時(shí)間戳的格式我們進(jìn)行了一次...
-
對(duì)RFC 3339的時(shí)間、時(shí)區(qū)格式詳解這是一個(gè)很小也很簡(jiǎn)單的事情陪竿，有些軟件工程師可能不清楚禽翼，但是把時(shí)間戳格式理解清楚對(duì)每個(gè)開(kāi)發(fā)工程師是很重要的一件事。 前段時(shí)間內(nèi)我們?cè)跇?gòu)建一個(gè)項(xiàng)目族跛，對(duì)于時(shí)間戳的格式我們進(jìn)行了一次...
-
解決Docker容器時(shí)區(qū)不正確的問(wèn)題
[TOC] 常出現(xiàn)docker中運(yùn)行的容器獲取到的時(shí)間與北京時(shí)間相差8小時(shí)的問(wèn)題闰挡，其實(shí)是因?yàn)槿萜鬟\(yùn)行的時(shí)區(qū)不正確。 解決方法是把宿主機(jī)上的時(shí)區(qū)鏈接到容器里面 一礁哄、修改已運(yùn)行容...
-
Grafana全面瓦解1.概述--美觀长酗、強(qiáng)大的可視化監(jiān)控指標(biāo)展示工具 grafana 是一款采用 go 語(yǔ)言編寫(xiě)的開(kāi)源應(yīng)用，主要用于大規(guī)模指標(biāo)數(shù)據(jù)的可視化展現(xiàn)桐绒，是網(wǎng)絡(luò)架構(gòu)和應(yīng)用分析中最流行的時(shí)序數(shù)...
-
-
Hadoop運(yùn)維
Hadoop集群運(yùn)維 場(chǎng)景1：namenode節(jié)點(diǎn)故障，active namenode節(jié)點(diǎn)狀態(tài)切換烁竭？如何恢復(fù)菲茬？ 1.1 Hadoop HA 的namenode狀態(tài)切換 模擬線...
-
google翻譯都不校準(zhǔn)一下？
大數(shù)據(jù)Hadoop2.x與Hadoop3.x相比較有哪些變化
在這篇文章中颖变，我們將討論Hadoop 2.x與Hadoop 3.x之間的比較生均。 Hadoop3版本中添加了哪些新功能，Hadoop3中兼容的Hadoop 2程序腥刹，Hadoop...
-
elementUI比bootstrap更香??
2019-08-13 Django+Vue.js實(shí)現(xiàn)前后端分離的單頁(yè)面博客系統(tǒng)（5）添加博文功能的實(shí)現(xiàn)
昨天一直在想一些事情衔峰、解決一些問(wèn)題所以摸魚(yú)了一天沒(méi)有開(kāi)發(fā)這個(gè)項(xiàng)目佩脊，今天想到這個(gè)項(xiàng)目還沒(méi)有做完蛙粘，于是又回來(lái)繼續(xù)做了。只可惜因?yàn)榘滋烀χ鴧⒓优嘤?xùn)威彰，一天只開(kāi)發(fā)了一個(gè)添加博文的功能出牧。...
-
Linux查看實(shí)時(shí)網(wǎng)卡流量的幾種方式
在工作中，我們經(jīng)常需要查看服務(wù)器的實(shí)時(shí)網(wǎng)卡流量歇盼。通常舔痕，我們會(huì)通過(guò)這幾種方式查看Linux服務(wù)器的實(shí)時(shí)網(wǎng)卡流量。 1. sar -n DEV 1 2 sar命令包含在sysst...
