大數(shù)據(jù) - 專題

投稿

收錄了71篇文章 · 162人關(guān)注

大數(shù)據(jù)實(shí)戰(zhàn)之App管理平臺日志分析（二）
原文鏈接使用的是客戶端收集的日志直接輸出到flume中，在flume收集完后，保存到hdfs中孔祸。其中有定義flume的自定義攔截器隆敢。上面是把數(shù)...

2.9 小小毛同學(xué) 0 4
Azkaban 簡單入門
Azkaban是由Linkedin開源的一個(gè)批量工作流任務(wù)調(diào)度器。用于在一個(gè)工作流內(nèi)以一個(gè)特定的順序運(yùn)行一組工作和流程崔慧。Azkaban定義了一種...

1.7 FantJ 0 33

搭建時(shí)間服務(wù)器并配置集群自動時(shí)鐘同步
搭建時(shí)間服務(wù)器并配置集群自動時(shí)鐘同步一拂蝎、搭建時(shí)間服務(wù)器（一）為什么要搭建時(shí)間服務(wù)器因?yàn)镠adoop 對集群中各個(gè)機(jī)器的時(shí)間同步要求比較高...

Y先生的領(lǐng)地 0 1
如果人死了--QQ怎么辦？
想必這個(gè)問題惶室，大家都可能會想過這個(gè)問題：如果某一天自己掛掉了温自，QQ怎么辦？不在上線皇钞，沒有回復(fù)悼泌，過段時(shí)間騰訊官方直接清除該人的記錄？ ...

0.2 Y先生的領(lǐng)地 7 6
HDFS MapReduce
hdfs的讀寫流程 hdfs寫數(shù)據(jù) 1）客戶端通過DistributedFileSystem模塊向namenode請求上傳文件夹界，namenod...

木迪_2a4e 0 1
集群中配置出現(xiàn)的錯誤：
1馆里，防火墻沒關(guān)閉、或者沒有啟動 yarn 集群中錯誤首先看防火墻可柿。2鸠踪，datanode 不被 namenode 識別問題Namenode...

一條大狼狗 0 1
簡單操作DML（Data Manipulation Language）
數(shù)據(jù)操作語言（DML) ：SQL的分類之一，命令使用戶能夠查詢數(shù)據(jù)庫以及操作已有數(shù)據(jù)庫中的數(shù)據(jù)的計(jì)算機(jī)語言复斥。簡單的說就是用來操作數(shù)據(jù) 营密，還有...

一條大狼狗 0 0

hadoop集群時(shí)間同步
同步方式選擇一個(gè)機(jī)器，作為時(shí)間服務(wù)器（這里選擇hadoop01）目锭，所有的機(jī)器與這臺集群時(shí)間進(jìn)行定時(shí)的同步评汰，比如，每隔十分鐘侣集，同步一次時(shí)間键俱。所...

ZIMMY_fb0f 0 0
集群常見錯誤解決方案
1兰绣、java.net.NoRouteToHostException: No route to host 解決方法：zookeeper的IP要配對...

0.2 ReeceDing 0 2
hadoop常見錯誤集錦
1世分、啟動hadoop時(shí)沒有NameNode的可能原因：（1） NameNode沒有格式化（2）環(huán)境變量配置錯誤（3） Ip和hostname...

2.6 堂哥000 0 1