發(fā)簡信
IP屬地：甘肅
-
Raft 木筏求生 游戲記錄通過這個(gè)游戲有一段時(shí)間了笑陈，游戲玩家出生在一個(gè)簡單幾塊模板拼裝的木筏上居凶，初始送了玩家一把鉤子俐筋。需要通過這個(gè)鉤子撈取海上的屋子不斷攀升科技抡秆，建造更多...
-
將近6年過去了大溜，你變得怎么樣了差油？
無意間想起了簡書這個(gè)平臺泳炉，翻看了一下上一篇文章的時(shí)間憾筏，發(fā)現(xiàn)竟然是“2018.10.29 22:39”。時(shí)間過得真快胡桃，轉(zhuǎn)眼間已經(jīng)快六年了踩叭。 我是一...
-
Spark Streaming實(shí)時(shí)流處理-4.分布式日志收集框架Flume分布式日志收集框架Flume 1.業(yè)務(wù)現(xiàn)狀分析 WebServer/ApplicationServer分散在各個(gè)機(jī)器上 想在大數(shù)據(jù)平臺Hadoo...
-
Spark Streaming實(shí)時(shí)流處理-3.分布式消息隊(duì)列Kafka
0. 目錄 Kafka概述 Kafka架構(gòu)及核心概念 Kafka部署及使用 Kafka容錯(cuò)性測試 Kafka API編程 Kafka實(shí)戰(zhàn) 1. ...
-
Spark Streaming實(shí)時(shí)流處理-2. Spark實(shí)戰(zhàn)環(huán)境搭建
0. 目錄 Spark源碼編譯 Spark環(huán)境搭建 Spark簡單使用 1. Spark源碼編譯 http://spark.apache.org...
-
Spark Streaming實(shí)時(shí)流處理-1.初識實(shí)時(shí)流處理目錄 業(yè)務(wù)現(xiàn)狀分析 實(shí)時(shí)流處理產(chǎn)生背景 實(shí)時(shí)流處理概述 離線計(jì)算與實(shí)時(shí)計(jì)算對比 實(shí)時(shí)流處理框架對比 實(shí)時(shí)流處理架構(gòu)與技術(shù)選型 實(shí)時(shí)流處理在企業(yè)中...
-
資源調(diào)度框架YARN1. YARN產(chǎn)生背景 Hadoop1.x時(shí)：MapReduce1.x存在問題：單點(diǎn)故障&節(jié)點(diǎn)壓力大不易擴(kuò)展&不能支持除了MR以外的任務(wù)MapR...
-
分布式文件系統(tǒng)HDFS0. 普通分布式文件系統(tǒng)設(shè)計(jì)思路 文件以多副本的方式，整個(gè)文件存放到單機(jī)中翠胰。 缺點(diǎn):文件不管有多大都存儲在一個(gè)節(jié)點(diǎn)上容贝，在進(jìn)行數(shù)據(jù)處理的時(shí)候很難進(jìn)...
-
Hadoop 概述1. hadoop是什么？ Apache開源軟件 計(jì)算框架--》分布式之景、可靠斤富、可伸縮（任何節(jié)點(diǎn)刪除添加不會影響） 搜索引擎、海量數(shù)據(jù)存儲 2. ...