衛(wèi)漸行

你們現(xiàn)在解決了嗎帜消？

Hive bitmap udf

背景 在hive中使用Roaring64Bitmap實現(xiàn)精確去重功能 主要目的：1.提升 hive 中精確去重性能，代替hive 中的 count(distinct uuid...

菜鳥驛站助手

4234 4 4

衛(wèi)漸行 ·

spark sql 使用這些udf會報錯：Caused by: java.lang.ClassNotFoundException: org.roaringbitmap.ArraysShim，是什么原因呀

suibf 評論自Hive bitmap udf

衛(wèi)漸行

Q&A Q：如圖。 A：當然是自帶的哩牍。其實RoaringBitmap正是ClickHouse位圖的底層實現(xiàn)（笑 RoaringBitmap的預備知識請見這里缠导。 在CH中產(chǎn)生位...

衛(wèi)漸行

自身問題 一. 對自己寫的代碼不自信。二.遇到問題總是想著很難卓起，自己解決不了。三.遇到問題喜歡退縮，不喜歡花時間媳溺。四.花費時間周期太長，要加快進度五.沒有頭緒 代碼問題 a...

衛(wèi)漸行

@_大叔_

hive導入到clickhouse的幾種方式總結

在開發(fā)過程中碍讯，需要從HDFS中導入數(shù)據(jù)到clickhouse中悬蔽，探索了幾種方式，以及一些坑與大家分享捉兴； Waterdrop 參考大神的文章屯阀，實現(xiàn)快速的安裝，和相關配置如何快速...

衛(wèi)漸行

17904 2 4 1

衛(wèi)漸行

應用對接的方式包含： mysql mongodb http 三種方式都可以實現(xiàn)對于預測器的透出弟塞；當然我們常見的都是http或者mysql的方式； 下面介紹mysql的方式實現(xiàn)...

衛(wèi)漸行

最近在看阿里開源RPC框架Dubbo的源碼拙已，順帶梳理了一下其中用到的設計模式决记。下面將逐個列舉其中的設計模式，并根據(jù)自己的理解分析這樣設計的原因和優(yōu)劣倍踪。 責任鏈模式 責任鏈模式...

衛(wèi)漸行

一定要自己畫圖

MVC設計模式

MVC是常用的設計模式之一系宫，將程序分成三個層次分別是：視圖模型層（V），控制器層（C）建车，數(shù)據(jù)模型層（M） 好處： 1.程序結構靈活扩借，清晰2.描述各個對象之間的通信方式3.降低...

思考z

437 1 1

衛(wèi)漸行

非沉斐猓快的兩個星期過去了嫉到，自己的狀態(tài)還沒有找回來，似乎在這兩個星期停止了學習的腳步一樣月洛，感覺自己是一個遇到難就想逃避的一個人屯碴，明明知道解決這個難題會有非常大的進步，面對問題敢于...

衛(wèi)漸行

國慶回來狀態(tài)挺好的意識到了自己還要學習的非常多爵卒，時間也不會有多少了虚缎，Java基礎沒有學完Mysql數(shù)據(jù)庫上課也聽不懂了，課后沒有花時間去看钓株，所以在上個星期一有時間就會去圖書館...

衛(wèi)漸行

國慶在家?guī)缀蹙褪菦]有心去學習实牡，自己的打算是明天都學習，想著是每天都廢寢忘食轴合，想的好创坞，但是沒有一天是做到了的，這幾天也是意識到時間實在是不多了受葛，一刻也不能放縱自己题涨，放松了偎谁，應該...

衛(wèi)漸行

知道和做到是世界上最遙遠的距離，每個人的腦子都有自己的打算纲堵，都有自己非常好的安排巡雨，非常好的想法，但是去僅僅是頭腦上的知道席函，真正的做出來需要代價铐望，知道要好好學習，行出來的不一樣...

衛(wèi)漸行

Nessie可以管理像git 分支茂附，合并數(shù)據(jù)源等一些特性正蛙； 受git的版本管理啟發(fā) 跨表事務和可見性 支持hive,spark,AWS Athena,dremio，管理其數(shù)據(jù)...