皮皮雜談

金融行業(yè)是典型的數(shù)據(jù)驅(qū)動行業(yè)肮街，每天都會產(chǎn)生大量的數(shù)據(jù)，包括交易判导、報價嫉父、業(yè)績報告、消費(fèi)者研究報告眼刃、各類統(tǒng)計數(shù)據(jù)绕辖、各種指數(shù)等。 所以鸟整，金融行業(yè)擁有豐富的數(shù)據(jù)引镊，數(shù)據(jù)維度比較廣泛，數(shù)...

皮皮雜談

經(jīng)過近幾年的發(fā)展，大數(shù)據(jù)技術(shù)已經(jīng)慢慢地滲透到各個行業(yè)涉茧。不同行業(yè)的大數(shù)據(jù)應(yīng)用進(jìn)程的速度赴恨，與行業(yè)的信息化水平、行業(yè)與消費(fèi)者的距離伴栓、行業(yè)的數(shù)據(jù)擁有程度有著密切的關(guān)系伦连。總體看來钳垮，應(yīng)用...

皮皮雜談

在購物、教育饺窿、醫(yī)療都已經(jīng)要求在大數(shù)據(jù)歧焦、移動網(wǎng)絡(luò)支持下的個性化的時代，創(chuàng)新已經(jīng)成為企業(yè)的生命之源肚医，企業(yè)也不應(yīng)該繼續(xù)遵循工業(yè)時代的規(guī)則绢馍，強(qiáng)調(diào)命令式集中管理、封閉的層級體系和決策體...

皮皮雜談

大數(shù)據(jù)的本質(zhì)是解決問題肠套，大數(shù)據(jù)的核心價值就在于預(yù)測舰涌，而企業(yè)經(jīng)營的核心也是基于預(yù)測而做出正確判斷。在談?wù)摯髷?shù)據(jù)應(yīng)用時你稚，最常見的應(yīng)用案例便是“預(yù)測股市”“預(yù)測流感”“預(yù)測消費(fèi)者行...

皮皮雜談

大部分推薦引擎的工作原理是基于物品或者用戶的相似集進(jìn)行推薦瓷耙，所以可以對推薦機(jī)制進(jìn)行以下分類朱躺。 基于人口統(tǒng)計學(xué)的推薦：根據(jù)系統(tǒng)用戶的基本信息發(fā)現(xiàn)用戶的相關(guān)程度。 基于內(nèi)容的推薦...

皮皮雜談

大數(shù)據(jù)是收集哺徊、整理室琢、處理大規(guī)模數(shù)據(jù)集，并從中獲得見解所需的非傳統(tǒng)思維和技術(shù)的總稱落追。大數(shù)據(jù)時代不僅需要解決大規(guī)模盈滴、多樣化數(shù)據(jù)的高效存儲問題，同時還需要解決大規(guī)模轿钠、多樣化數(shù)據(jù)的高...

皮皮雜談

回歸與線性對數(shù)模型可用于擬合所給定的數(shù)據(jù)集巢钓。線性回歸方法是利用一條直線模型對數(shù)據(jù)進(jìn)行擬合的，可以是基于一個自變量的疗垛，也可以是基于多個自變量的症汹。 線性對數(shù)模型則是擬合多維離散概...

皮皮雜談

噪聲數(shù)據(jù)是指數(shù)據(jù)中存在著錯誤或異常（偏離期望值）的數(shù)據(jù)，不完整數(shù)據(jù)是指感興趣的屬性沒有值贷腕，而不一致數(shù)據(jù)則是指數(shù)據(jù)內(nèi)涵出現(xiàn)不一致情況（例如背镇，作為關(guān)鍵字的同一部門編碼出現(xiàn)不同值）...

皮皮雜談

數(shù)據(jù)預(yù)處理負(fù)責(zé)將分散的、異構(gòu)數(shù)據(jù)源中的數(shù)據(jù)如關(guān)系數(shù)據(jù)泽裳、網(wǎng)絡(luò)數(shù)據(jù)瞒斩、日志數(shù)據(jù)、文件數(shù)據(jù)等抽取到臨時中間層涮总，然后進(jìn)行清洗胸囱、轉(zhuǎn)換、集成瀑梗，最后加載到數(shù)據(jù)倉庫或數(shù)據(jù)庫中烹笔，成為通過數(shù)據(jù)分析...

皮皮雜談

網(wǎng)絡(luò)數(shù)據(jù)采集是指通過網(wǎng)絡(luò)爬蟲或網(wǎng)站公開API等方式從網(wǎng)站上獲取數(shù)據(jù)信息。該方法可以將非結(jié)構(gòu)化數(shù)據(jù)從網(wǎng)頁中抽取出來抛丽，將其存儲為統(tǒng)一的本地數(shù)據(jù)文件谤职，并以結(jié)構(gòu)化的方式存儲。它支持圖...

皮皮雜談

數(shù)據(jù)分析是大數(shù)據(jù)處理的核心亿鲜，但是用戶往往更關(guān)心對結(jié)果的解釋柬帕。如果分析的結(jié)果正確，但是沒有采用適當(dāng)?shù)姆椒ㄟM(jìn)行解釋狡门，則所得到的結(jié)果很可能讓用戶難以理解，極端情況下甚至?xí)鹩脩舻?..

皮皮雜談

數(shù)據(jù)分析是整個大數(shù)據(jù)處理流程的核心锅很，大數(shù)據(jù)的價值產(chǎn)生于分析過程其馏。從異構(gòu)數(shù)據(jù)源抽取和集成的數(shù)據(jù)構(gòu)成了數(shù)據(jù)分析的原始數(shù)據(jù)。根據(jù)不同應(yīng)用的需求可以從這些數(shù)據(jù)中選擇全部或部分進(jìn)行分析...

皮皮雜談

大數(shù)據(jù)的一個重要特點(diǎn)就是多樣性，這就意味著數(shù)據(jù)來源極其廣泛驼鹅，數(shù)據(jù)類型極為繁雜微谓。這種復(fù)雜的數(shù)據(jù)環(huán)境給大數(shù)據(jù)的處理帶來極大的挑戰(zhàn)。 要想處理大數(shù)據(jù)输钩，首先必須對所需數(shù)據(jù)源的數(shù)據(jù)進(jìn)行...