Hadoop系 - 專題

投稿

Hadoop系

收錄了127篇文章 · 383人關注

YARN常見問題與常用配置
常見問題 YARN集群還有資源施符，為什么部分任務還是一直處于ACCEPT狀態(tài)？大數(shù)據(jù)集群還剩有很多資源，部分任務還是一直處于ACCEPT狀態(tài)。首...

0.2 朝朝Mumu 0 3
關于HIVE
HQL語句刪除查看語句: 創(chuàng)建語句: 創(chuàng)建內(nèi)部/外部表區(qū)別:刪除表時外部表只會刪除元數(shù)據(jù)不會刪除數(shù)據(jù)本身. hive的三種數(shù)據(jù)類型創(chuàng)建分區(qū)...

0.9 八爪魚下水 0 5

關于HIVE2
普通查詢: 三個排序: 四個分析函數(shù): 放置位置select之前from之后. 當前行跟其他行級聯(lián)求各種的五個函數(shù) max/min/sum/av...

0.1 八爪魚下水 0 1
Hadoop—LDAP介紹和使用
LDAP介紹 LDAP概述 ??LDAP是輕量目錄訪問協(xié)議，（LDAP, Lightweight Directory Access Protoc...

0.1 Hughman 0 1
MapReduce2深入淺析
一东亦、MapReduce2工作機制 1.1、MapReduce2的架構(gòu)圖 1.2唬渗、MapReduce2運作步驟說在前頭的話典阵，上圖中有一個Reso...

0.6 憤怒的謎團 0 3
hive sql資源調(diào)優(yōu)+數(shù)據(jù)傾斜解決方案
一、mapreduce過程資源優(yōu)化要了解mapreduce的資源優(yōu)化谣妻，首先應該要熟悉整個mapreduce的過程萄喳，可以參考mapreduce2...

0.3 憤怒的謎團 0 3
Hadoop學習（五）——YARN運行原理剖析
一、YARN的誕生在hadoop1.0版本是沒有yarn的概念的蹋半，而在hadoop2.0版本以上才出現(xiàn)了yarn他巨，人們是希望有一套合理的管理機...

大數(shù)據(jù)階梯之路 1 2

hdfs寫之打開文件流<一>
一、客戶端創(chuàng)建寫文件的流程圖 namenode主要創(chuàng)建客戶端RPC請求的準寫的文件，namenode會把文件名保存到namespace中染突，然后返...

0.1 古語1 0 2
hdfs寫之寫數(shù)據(jù)<二>
一捻爷、寫數(shù)據(jù)流程圖該流程主要是客戶端開始寫數(shù)據(jù)，然后把數(shù)據(jù)切分多個chunk份企，多個chunk組成一個packet也榄，發(fā)送到queue中，等待dat...

0.1 古語1 2 1
hdfs讀之總結(jié)<四>
一司志、hdfs讀取流程圖假設block副本個數(shù)3個客戶端發(fā)起請求到namenode節(jié)點甜紫，要求namenode告訴客戶端讀取的block位置在哪...

0.1 古語1 0 1