發(fā)簡(jiǎn)信
IP屬地：廣東
-
Hbase - 表導(dǎo)出CSV數(shù)據(jù)新鮮文章套媚，昨天剛經(jīng)過線上驗(yàn)證過的佑钾，使用它導(dǎo)出了3億的用戶數(shù)據(jù)出來(lái)笤闯，花了半個(gè)小時(shí)稚补，性能還是穩(wěn)穩(wěn)的矩动，好了不吹牛皮了勺三，直接上代碼吧隧膘。 MR 考查了Hb...
-
Logstash - JSON格式文件轉(zhuǎn)換一份簡(jiǎn)單可用的JSON轉(zhuǎn)換配置test.log json.conf
-
Java 與 Scala 使用Maven混合編譯打包
在SpringBoot上使用spark的時(shí)候會(huì)遇到的混合編譯問題囤采，在java代碼中打包會(huì)找不到scala定義的包述呐，即可參考使用如下配置。 使用配置
-
Clustershell - 管理上萬(wàn)臺(tái)L
在集群的現(xiàn)在蕉毯，管理成千上萬(wàn)的Linux機(jī)子成為了一個(gè)難題乓搬，不能再使用一臺(tái)一臺(tái)登錄主機(jī)去進(jìn)行管理了，工作量無(wú)疑是非常巨大的恕刘，這里我們可以借助Clu...
-
Java 與 js完美RSA非對(duì)稱加密
有這樣一個(gè)需求缤谎，前端登錄的用戶名密碼，密碼必需加密褐着，但不可使用MD5坷澡，因?yàn)楹笈_(tái)要檢測(cè)密碼的復(fù)雜度，那么在保證安全的前提下將密碼傳到后臺(tái)呢含蓉，答案就...
-
Centos7 - 添加開機(jī)啟動(dòng)服務(wù)
Centos7.x的版本的服務(wù)都是以systemctl start xxxx來(lái)啟動(dòng)的频敛，如何制作自己的開機(jī)啟動(dòng)腳本? 大豬就來(lái)帶大家如何實(shí)現(xiàn)一個(gè)自...
-
git - Webhook讓部署自動(dòng)化
我們現(xiàn)在有一個(gè)需求，將項(xiàng)目打包上傳到gitlab或者github后馅扣，程序能自動(dòng)部署斟赚，不用手動(dòng)地去服務(wù)器中進(jìn)行項(xiàng)目更新并運(yùn)行，如何做到差油？這里我們可...
-
Selenium 自動(dòng)化操作今天分享一個(gè)超有意思的東西 Selenium 自動(dòng)化測(cè)試/調(diào)式工具拗军。 Selenium 就像真實(shí)用戶所做的一樣任洞，Selenium 測(cè)試可以在 W...
-
Hbase - 遷移數(shù)據(jù)[導(dǎo)出,導(dǎo)入]有沒有這樣一樣情況，把一個(gè)集群中的某個(gè)表導(dǎo)到另一個(gè)群集中发侵，或者h(yuǎn)base的表結(jié)構(gòu)發(fā)生了更改交掏，但是數(shù)據(jù)還要，比如預(yù)分區(qū)沒做刃鳄，導(dǎo)致某臺(tái)RegionS...