發(fā)簡信
IP屬地：廣東
-
「大數(shù)據(jù)」04大數(shù)據(jù)框架：Lambda Architecture(LA)
1.LA框架的提出 最早由Twitter工程師Nathan Marz提出來优俘，它是一種大數(shù)據(jù)軟件設(shè)計架構(gòu)蹋肮，其目的是指導(dǎo)用戶充分利用批處理和流式計算...
-
「大數(shù)據(jù)」03Hadoop與Spark開源大數(shù)據(jù)技術(shù)棧Hadoop與Spark開源大數(shù)據(jù)技術(shù)棧如下圖： （1）數(shù)據(jù)收集層：主要由關(guān)系型與非關(guān)系型數(shù)據(jù)收集組件吭净、分布式消息隊列構(gòu)成访圃。 ①Sqoop/Ca...
-
「大數(shù)據(jù)」02大數(shù)據(jù)技術(shù)體系從數(shù)據(jù)在信息系統(tǒng)中的生命周期看替蔬，大數(shù)據(jù)從數(shù)據(jù)源開始告私，經(jīng)過分析、挖掘到最終環(huán)節(jié)獲得價值一般需要經(jīng)過6個主要環(huán)節(jié)：數(shù)據(jù)收集承桥、數(shù)據(jù)存儲驻粟、資源管理與服務(wù)...
-
「大數(shù)據(jù)」01大數(shù)據(jù)的概念及應(yīng)用場景
1.大數(shù)據(jù)的概念 2015年國務(wù)院向社會公布了《促進大數(shù)據(jù)發(fā)展行動綱要》明確提出了大數(shù)據(jù)的基本概念：大數(shù)據(jù)是以容量大、類型多凶异、存取速度快格嗅、應(yīng)...
-
「爬蟲」19利用PhantomJS編寫爬蟲程序雖然PhantomJS的開發(fā)者已經(jīng)停止更新了，但現(xiàn)存版本依舊可以使用唠帝，仍然可以用來解決爬蟲中遇到的某些問題屯掖，所以還是很值得了解學(xué)習(xí)一下的。 （1...
-
「補充」20Python主要模塊的使用
import numpy對數(shù)據(jù)進行操作襟衰，創(chuàng)建數(shù)組贴铜，生成隨機數(shù) ·numpy.concatenate()數(shù)據(jù)集成 import pandas導(dǎo)入數(shù)...
-
「補充」19sklearn庫自帶標準數(shù)據(jù)集說明
sklearn庫中自帶的標準數(shù)據(jù)集有： 前面有用到過的數(shù)據(jù)集說明： （1）波士頓房價數(shù)據(jù)集(boston)包含506組數(shù)據(jù)，每條數(shù)據(jù)包含房屋以及...
-
「關(guān)聯(lián)分析」18關(guān)聯(lián)分析之Aprior算法與FP-growth算法1.關(guān)聯(lián)分析 關(guān)聯(lián)分析是從大量數(shù)據(jù)中發(fā)現(xiàn)項集之間的相關(guān)聯(lián)系瀑晒。關(guān)聯(lián)分析的一個典型例子是購物籃分析绍坝。該過程通過發(fā)現(xiàn)顧客放人其購物籃中的不同商品之間的...
-
「人工神經(jīng)網(wǎng)絡(luò)」17人工神經(jīng)網(wǎng)絡(luò)之BP算法
1.人工神經(jīng)網(wǎng)絡(luò) 人工神經(jīng)網(wǎng)絡(luò)(Artificial Neural Network，ANN)是在受到了生物學(xué)的啟發(fā)后創(chuàng)建的苔悦，在某種程度上它是對生...