發(fā)簡(jiǎn)信
IP屬地：北京
-
kafka 0.11 事務(wù)機(jī)制梳理接下來從三個(gè)部分介紹下kafka 0.11及以上版本如何實(shí)現(xiàn)事務(wù)機(jī)制担租。 第一部分：kafka producer生產(chǎn)records的過程懊纳。 第二部...
-
Netty系列-Bytebuf中pool、unpool忘渔、heap、Direct類型結(jié)構(gòu)秒懂上一篇介紹了ByteBuffer和ByteBuf結(jié)構(gòu)，Bytebuf提供接口方法要比ByteBuffer簡(jiǎn)潔并強(qiáng)大。這篇在ByteBuf基礎(chǔ)上學(xué)...
-
Netty系列-一分鐘了解ByteBuffer和ByteBuf結(jié)構(gòu)上一篇文章BIO沸版、NIO掃盲主要介紹了BIO和NIO模型網(wǎng)絡(luò)結(jié)構(gòu)，并通過簡(jiǎn)單代碼說明BIO和NIO核心功能及使用兴蒸。NIO通過多路復(fù)用選擇器Sel...
-
Netty系列-BIO、NIO 掃盲熟悉網(wǎng)絡(luò)編程的同學(xué)可能聽過BIO细办、NIO網(wǎng)絡(luò)模型橙凳。本篇文章作為Netty系列開篇蕾殴，先從總體介紹下以上兩種網(wǎng)絡(luò)I/O模型。 BIO ...
-
elasticsearch 常用知識(shí)概念在應(yīng)用系統(tǒng)需要進(jìn)行文本內(nèi)容檢索時(shí)岛啸，這時(shí)不得不提到全文檢索钓觉。而全文檢索是將一個(gè)完整的信息源的全部?jī)?nèi)容轉(zhuǎn)化為計(jì)算機(jī)可以識(shí)別、處理的信息單元而形成的數(shù)...
-
Hadoop yarn運(yùn)行機(jī)制及調(diào)度過程知識(shí)hadoop主要組件有hdfs坚踩、yarn荡灾，hdfs是分布式文件系統(tǒng)，主要是進(jìn)行文件的存儲(chǔ)瞬铸，而yarn是hadoop集群資源管理系統(tǒng)批幌，支持分布式計(jì)...
-
MapReduce執(zhí)行過程及shuffle詳解開始學(xué)習(xí)Hadoop時(shí)，經(jīng)常會(huì)聽到MapReduce嗓节。MapReduce由Map和Reduce兩個(gè)階段荧缘，每個(gè)階段都是以鍵-值對(duì)作為輸入和輸出，M...
-
hive數(shù)據(jù)調(diào)優(yōu)
hive作為數(shù)據(jù)倉(cāng)庫工具拦宣，可以查看HDFS結(jié)構(gòu)化文件內(nèi)容截粗，使用sql進(jìn)行數(shù)據(jù)加工處理。在使用hive進(jìn)行數(shù)據(jù)查詢時(shí)鸵隧，底層執(zhí)行引擎主要是MapRe...
-
hive 主要sql整理在hive中進(jìn)行數(shù)據(jù)處理和查詢時(shí)绸罗，常用又比較生僻sql整理。 group by and having group by通常會(huì)和聚合函數(shù)一起使用豆瘫，...