spark||flink||scala - 專題

投稿

spark||flink||scala

收錄了171篇文章 · 13人關(guān)注

Flink SQL Client集成Hive
環(huán)境 CDH-6.3.2Flink-1.12.2最后會(huì)補(bǔ)充說(shuō)明Flink-1.13.1的使用方法準(zhǔn)備在flink-1.12.2/lib目錄需...

0.8 Woople 1 7
DataX擴(kuò)展hudiwriter組件
前言最近公司啟動(dòng)了一個(gè)規(guī)劃2年的項(xiàng)目，是做一個(gè)數(shù)據(jù)平臺(tái)。主要包括數(shù)據(jù)同步（實(shí)時(shí)/離線）、mapping（實(shí)時(shí)/離線）、數(shù)倉(cāng)（實(shí)時(shí)/離線）尖昏、源數(shù)...

0.1 Coder小咚 0 1

JAVA IO專題三：java的內(nèi)存映射和應(yīng)用場(chǎng)景
相關(guān)java IO專題 JAVA IO專題一：java InputStream和OutputStream讀取文件并通過(guò)socket發(fā)送蛙埂，到底涉及...

擋不住的柳Willow 1 1
JAVA IO專題四：java順序IO原理以及對(duì)應(yīng)的應(yīng)用場(chǎng)景
其他相關(guān)專題 JAVA IO專題一：java InputStream和OutputStream讀取文件并通過(guò)socket發(fā)送图贸，到底涉及幾次拷貝[...

0.1 擋不住的柳Willow 0 1
換個(gè)角度看“順序?qū)憽焙汀半S機(jī)寫”室琢，以及 LSM tree 理解
順序?qū)?每個(gè) fd 都關(guān)聯(lián)一個(gè) 當(dāng)前的 offset乾闰，每次寫入 offset 都會(huì)更新。順序?qū)懭刖褪撬械膶懚际菍懏?dāng)前的 offset盈滴，隨機(jī)寫...

0.7 陳半仙兒 0 2
深入理解 linux磁盤順序?qū)懷募纭㈦S機(jī)寫
深入理解 linux磁盤順序?qū)憽㈦S機(jī)寫一巢钓、前言 ● 隨機(jī)寫會(huì)導(dǎo)致磁頭不停地?fù)Q道病苗，造成效率的極大降低；順序?qū)懘蓬^幾乎不用換道症汹，或者換道的時(shí)間很短...

wilsonchai 1 4
深度解析 Lucene 輕量級(jí)全文索引實(shí)現(xiàn)原理
一铅乡、Lucene簡(jiǎn)介 1.1 Lucene是什么？ Lucene是Apache基金會(huì)jakarta項(xiàng)目組的一個(gè)子項(xiàng)目烈菌； Lucene是一個(gè)開(kāi)放源...

vivo互聯(lián)網(wǎng)技術(shù) 0 0

mysql索引原理--從磁盤結(jié)構(gòu)到B+樹(shù)
原文地址[https://juejin.cn/post/6844903774402641927]附視頻講解：https://www.youtub...

0.2 布拉德老瓜 0 1
B+樹(shù)總結(jié)
B+樹(shù)特征 B+ 樹(shù)是一種樹(shù)數(shù)據(jù)結(jié)構(gòu)阵幸，是一個(gè)n叉樹(shù)，每個(gè)節(jié)點(diǎn)通常有多個(gè)孩子芽世，一顆B+樹(shù)包含根節(jié)點(diǎn)挚赊、內(nèi)部節(jié)點(diǎn)和葉子節(jié)點(diǎn)。B+ 樹(shù)通常用于數(shù)據(jù)庫(kù)和操...

2.6 CPinging 6 44
六济瓢、HBase寫入流程
1荠割、HBase寫入流程 HBase服務(wù)端沒(méi)有提供update,delete接口，HBase中對(duì)數(shù)據(jù)的更新旺矾、刪除操作都認(rèn)為是寫入操作蔑鹦，更新操作會(huì)寫...

loukey_j 0 1