Jenkins 與 RabbitMQ 集成包括兩部分： 1. 通過 RabbitMQ 觸發(fā) Jenkins 構(gòu)建送浊，這里 Jenkins 作為 RabbitMQ 的 consu...
發(fā)簡信
IP屬地：浙江
-
Jenkins 與 RabbitMQ 集成（一） -
利用kettle的JS進(jìn)行ETL數(shù)據(jù)校驗(yàn)(升級版)
無意中在網(wǎng)上看到一篇文章《利用kettle中的JS來完成ETL數(shù)據(jù)校驗(yàn)》悯姊，挺受啟發(fā)的语淘，覺得用JS來實(shí)現(xiàn)ETL的自動化校驗(yàn)镀钓，是個不錯的思路垂蜗。但是這篇文章里給的JS腳本樣例確實(shí)有...
-
kettle作業(yè)审孽，轉(zhuǎn)換日志
Kettle以文本行的方式輸出日志信息盟广，步驟結(jié)束時废岂，可以生成下面的一行日志： 這個日志行里有以下主要內(nèi)容： 日期和時間祖搓。 步驟名，步驟名的后面有一個點(diǎn)號湖苞，點(diǎn)號后面是步驟的拷貝...
-
Kettle手冊（二）- 將數(shù)據(jù)導(dǎo)出為Excel
好了拯欧，我們先來看第一個例子，就是怎樣將數(shù)據(jù)庫中的數(shù)據(jù)财骨，導(dǎo)出為Excel镐作。平時藏姐，如果我們需要將數(shù)據(jù)導(dǎo)出Excel的話，我們可能會直接復(fù)制该贾，然后粘貼出來羔杨，但是數(shù)據(jù)量大的話，就不好...
-
Kettle中ETL的效率優(yōu)化
背景 Kettle是什么？ Kettle是一款開源的ETL工具起便，目前由Pentaho公司在管理档押。該工具包含一個可視化界面，可以用來設(shè)計(jì)曙寡、運(yùn)行、調(diào)試ETL寇荧，被很多公司廣泛采用举庶。...
-
Kettle入門之二 Kettle應(yīng)用場景（只增量插入）在【數(shù)據(jù)整合】Kettle 應(yīng)用之一 介紹、安裝中我們已經(jīng)介紹了如何安裝Kettle工具】眨現(xiàn)在我們開始使用Kettle户侥。 Kettle應(yīng)用場景 示例1：將數(shù)據(jù)源A庫中的某張...
-
Kettle入門之三 Kettle定時任務(wù)（GUI）有時候，需要我們建立的轉(zhuǎn)換任務(wù)能夠定時執(zhí)行峦嗤，那么我們需要怎么辦呢蕊唐？ 此時，我們需要建立一個job寻仗，來讓轉(zhuǎn)換定時執(zhí)行刃泌。 操作步驟 1、運(yùn)行軟件署尤，進(jìn)入主界面耙替。點(diǎn)擊左上角的 文件 ...
-
Kettle入門之四 Kettle定時任務(wù)（后臺任務(wù)）
前面我們介紹了 Kettle的Spoon的轉(zhuǎn)換和作業(yè)定時任務(wù)GUI設(shè)計(jì)方式以及運(yùn)行，但是在實(shí)際應(yīng)用中曹体，我們需要計(jì)劃任務(wù)是在服務(wù)器后臺運(yùn)行俗扇。 首先我們需要了解Kettle的Ki...
