GoldData將采集數(shù)據(jù)融合到兩張關(guān)聯(lián)關(guān)系表

概述

在上一期中衡楞,我們抓取了新聞數(shù)據(jù)吱雏,現(xiàn)在我們要通過GoldData融合到兩張數(shù)據(jù)庫表news_site和news表當(dāng)中去。如下圖所示:

我們很容易看到這兩張表存在關(guān)聯(lián)瘾境,那是怎樣將數(shù)據(jù)寫入關(guān)聯(lián)呢歧杏,我們將接上一期在此一一介紹。

定義融合映射

數(shù)據(jù)集news ==> 表news_site

在“融合管理”中迷守,選擇數(shù)據(jù)集"news",選擇數(shù)據(jù)庫表news_site點(diǎn)擊“添加”按扭得滤,然后再點(diǎn)擊“編輯映射”。如下圖所示:

關(guān)聯(lián)數(shù)據(jù)方式選擇“關(guān)聯(lián)字段”盒犹,關(guān)聯(lián)表字段"name",關(guān)聯(lián)數(shù)據(jù)集JS為“dataset.source”懂更,然后選擇“保存”即可。

news_site表有兩個字段:一個是id字段急膀,由于是自增長字段沮协,所以不用關(guān)聯(lián);另一個是name字段,選擇映謝方式為“數(shù)據(jù)集字段”卓嫂,而內(nèi)容是來自于數(shù)據(jù)集news的source字段慷暂。

手動作業(yè)

我們回到“融合管理”頁面,點(diǎn)擊“融合作業(yè)”晨雳,然后點(diǎn)擊“手動作業(yè)”行瑞,打開“手動作業(yè)”子頁面,如下圖所示:

在這里我們可以看到融合是沒問題的餐禁。點(diǎn)擊“提交且下一條”血久,則會將合并結(jié)果寫入到數(shù)據(jù)庫表當(dāng)中。如下圖所示:

然后回到“融合作業(yè)”子頁面帮非,點(diǎn)擊“開始融合”氧吐,將會開始自動融合。如下圖所示:

系統(tǒng)就將會將數(shù)據(jù)集的數(shù)據(jù)按照指定的規(guī)則進(jìn)行一個個的融合了末盔。

數(shù)據(jù)集news ==> 表news

在“融合管理”中筑舅,選擇數(shù)據(jù)集"news",選擇數(shù)據(jù)庫表news點(diǎn)擊“添加”按扭,然后再點(diǎn)擊“編輯映射”陨舱。如下圖所示:

關(guān)聯(lián)數(shù)據(jù)方式選擇“不關(guān)聯(lián)翠拣,數(shù)據(jù)追加”,這將意味著數(shù)據(jù)集里的新數(shù)據(jù)將會追加到表news新記錄里游盲,但當(dāng)然老數(shù)據(jù)不會追加為news新記錄里误墓,也就是多次反復(fù)融合也不會在表news里產(chǎn)生重復(fù)數(shù)據(jù)邦尊。

對于字段映射,說明如下:

字段說明

id自增長优烧,不用映射

title直接映射為數(shù)據(jù)集字段title

pub_date使用JS 將數(shù)據(jù)集字段pubdate內(nèi)容添加:00即可

site_id映射表news_site蝉揍,通過數(shù)據(jù)集字段source查找得到id

content直接映射為數(shù)據(jù)集字段content

date_created用JS創(chuàng)建該值即可

手動作業(yè)

我們回到“融合管理”頁面,點(diǎn)擊“融合作業(yè)”畦娄,然后點(diǎn)擊“手動作業(yè)”又沾,打開“手動作業(yè)”子頁面,如下圖所示:

確認(rèn)正確無誤熙卡,點(diǎn)擊“提交且下一條”杖刷,數(shù)據(jù)將會寫入數(shù)據(jù)庫中。如下圖所示:

然后回到“融合作業(yè)”子頁面驳癌,點(diǎn)擊“開始融合”滑燃,將會開始自動融合。

結(jié)語

通過GoldData后颓鲜,我們很容易將數(shù)據(jù)及數(shù)據(jù)之間關(guān)系融合到關(guān)系數(shù)據(jù)庫表中表窘。接下來我們還介紹自關(guān)聯(lián)數(shù)據(jù)的融合。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末甜滨,一起剝皮案震驚了整個濱河市乐严,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌衣摩,老刑警劉巖昂验,帶你破解...
    沈念sama閱讀 218,858評論 6 508
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異艾扮,居然都是意外死亡既琴,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,372評論 3 395
  • 文/潘曉璐 我一進(jìn)店門泡嘴,熙熙樓的掌柜王于貴愁眉苦臉地迎上來甫恩,“玉大人,你說我怎么就攤上這事磕诊√钗铮” “怎么了纹腌?”我有些...
    開封第一講書人閱讀 165,282評論 0 356
  • 文/不壞的土叔 我叫張陵霎终,是天一觀的道長。 經(jīng)常有香客問我升薯,道長莱褒,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 58,842評論 1 295
  • 正文 為了忘掉前任涎劈,我火速辦了婚禮广凸,結(jié)果婚禮上阅茶,老公的妹妹穿的比我還像新娘。我一直安慰自己谅海,他們只是感情好脸哀,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,857評論 6 392
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著扭吁,像睡著了一般撞蜂。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上侥袜,一...
    開封第一講書人閱讀 51,679評論 1 305
  • 那天蝌诡,我揣著相機(jī)與錄音,去河邊找鬼枫吧。 笑死浦旱,一個胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的九杂。 我是一名探鬼主播颁湖,決...
    沈念sama閱讀 40,406評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼例隆!你這毒婦竟也來了爷狈?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 39,311評論 0 276
  • 序言:老撾萬榮一對情侶失蹤裳擎,失蹤者是張志新(化名)和其女友劉穎涎永,沒想到半個月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體鹿响,經(jīng)...
    沈念sama閱讀 45,767評論 1 315
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡羡微,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,945評論 3 336
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了惶我。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片妈倔。...
    茶點(diǎn)故事閱讀 40,090評論 1 350
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖绸贡,靈堂內(nèi)的尸體忽然破棺而出盯蝴,到底是詐尸還是另有隱情,我是刑警寧澤听怕,帶...
    沈念sama閱讀 35,785評論 5 346
  • 正文 年R本政府宣布捧挺,位于F島的核電站,受9級特大地震影響尿瞭,放射性物質(zhì)發(fā)生泄漏闽烙。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,420評論 3 331
  • 文/蒙蒙 一声搁、第九天 我趴在偏房一處隱蔽的房頂上張望黑竞。 院中可真熱鬧捕发,春花似錦、人聲如沸很魂。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,988評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽遏匆。三九已至霞玄,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間拉岁,已是汗流浹背坷剧。 一陣腳步聲響...
    開封第一講書人閱讀 33,101評論 1 271
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留喊暖,地道東北人惫企。 一個月前我還...
    沈念sama閱讀 48,298評論 3 372
  • 正文 我出身青樓,卻偏偏與公主長得像陵叽,于是被迫代替她去往敵國和親狞尔。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,033評論 2 355

推薦閱讀更多精彩內(nèi)容