最近在做的工作比較需要一個(gè)支持任務(wù)編排工作流的框架或者平臺(tái)，這里記錄下實(shí)現(xiàn)上的一些思路。 任務(wù)編排工作流 任務(wù)編排是什么意思呢爽丹，顧名思義就是可以把"任務(wù)"這個(gè)原子單位按照自己...
IP屬地：四川
-
基于DAG實(shí)現(xiàn)的任務(wù)編排框架&平臺(tái)
-
Hbase 讀取流程Hbase 讀取復(fù)雜原因： 主要基于兩個(gè)方面的原因： 一是因?yàn)镠Base一次范圍查詢可能會(huì)涉及多個(gè)Region缘挽、多塊緩存甚至多個(gè)數(shù)據(jù)存儲(chǔ)文件（HFile）蔫劣； 二是因?yàn)镠Bas...
-
十六 Gremlin Core Notes
GremlinScriptEngineManager JSR223,是java 的腳本引擎诡必，gremlin 使用groovy 作為腳本語(yǔ)言來(lái)定義gremlin 整個(gè) grem...
-
Calcite RBO rule 解析和自定義
什么是查詢優(yōu)化器 查詢優(yōu)化器是傳統(tǒng)數(shù)據(jù)庫(kù)的核心模塊脊框，也是大數(shù)據(jù)計(jì)算引擎的核心模塊涤妒，開源大數(shù)據(jù)引擎如 Impala单雾、Presto、Drill她紫、HAWQ硅堆、 Spark、Hive ...
-
gremlin語(yǔ)言介紹十：聚合查詢0 打開一個(gè)新的圖庫(kù) 本節(jié)的命令使用的測(cè)試數(shù)據(jù)是tinkerpop官方提供的Modern圖庫(kù)犁苏，使用以下命令可以加載tinkerpop modern圖庫(kù)硬萍，它包含6個(gè)vertex...
-
準(zhǔn)備執(zhí)行Gremlin的圖形化環(huán)境
背景 Gremlin是Apache TinkerPop框架下實(shí)現(xiàn)的圖遍歷語(yǔ)言，支持OLTP與OLAP围详，是目前圖數(shù)據(jù)庫(kù)領(lǐng)域主流的查詢語(yǔ)言朴乖，可類比SQL語(yǔ)言之于關(guān)系型數(shù)據(jù)庫(kù)。 H...
-
Spark Adaptive Execution調(diào)研
https://blog.csdn.net/u013332124/article/details/90677676 一助赞、Spark 目前現(xiàn)有的一些問(wèn)題 問(wèn)題一：Shuffle...
