發(fā)簡信
IP屬地：青海
-
Hadoop YARN 從節(jié)點NodeManager異常
Hadoop服務(wù)好一陣沒管了，今天上線發(fā)現(xiàn)從節(jié)點已宕機。重啟服務(wù)后，有個從節(jié)點只運行了DataNode而沒有NodeManager進程，查看日志...
-
10種經(jīng)典的排序算法（Python 實現(xiàn)）
最近刷題，有篇博客將經(jīng)典的排序算法都講得挺好，但原文是Java實現(xiàn)戈锻。特此將我對應(yīng)實現(xiàn)的Python版貼出如下～博客鏈接如下：https://bl...
-
Hadoop沒有啟動datanodes
采用Hadoop自帶的基準測試工具寫入文件時，出現(xiàn)問題： 采用$jps命令查看和媳，datanodes節(jié)點中只啟動了“nodemanager"格遭，并無...
-
Python GIL 全局解釋器鎖
有所收獲，特將原文翻譯如下留瞳。 原文：What is the Python Global Interpreter Lock(GIL)? URL: ...
-
Hadoop小解疑
1. Hadoop中的流數(shù)據(jù)訪問 Hadoop采用“一次寫入拒迅、多次讀取(流式數(shù)據(jù)訪問)”的訪問模式。對于大規(guī)模數(shù)據(jù)集而言她倘， 讀取整個數(shù)據(jù)集的時間...
-
群組：數(shù)據(jù)聚類
<數(shù)據(jù)聚類(data clustering): 用以尋找緊密相關(guān)的事璧微、人或觀點，并將其可視化的方法硬梁。> 監(jiān)督學(xué)習(supervised lear...
-
SRL/Autoencoder: 如何根據(jù)既有網(wǎng)絡(luò)層構(gòu)建解碼器
對輸入的重構(gòu)通過編碼器和解碼器完成前硫。例如:obs —encoder—> state presentation —decoder—> obs_re...
-
Hadoop安裝（完全分布式）
有空，上一個完整過程荧止。 softwareversionoperating systemUbuntu 18.04.3 LTSjdk version...
-
HDFS多副本放置策略及云中的優(yōu)化（LDBAS）在HDFS集群中屹电，一般設(shè)置多副本提高可靠性（冗余）阶剑，也能提高數(shù)據(jù)讀取的總體性能。但這多個副本應(yīng)該選擇哪些節(jié)點進行放置呢危号？即本文要討論的數(shù)據(jù)放置策...