前言 這兩年做streamingpro時键菱，不可避免的需要對Spark做大量的增強轧钓。就如同我之前吐槽的粘优，Spark大量使用了new進行對象的創(chuàng)建恰起，導(dǎo)致里面的實現(xiàn)基本沒有辦法進行...
IP屬地：北京
-
對Spark的那些【魔改】
-
實現(xiàn)緩存最終一致性的兩種方案一、重客戶端 寫入緩存： 應(yīng)用同時更新數(shù)據(jù)庫和緩存 如果數(shù)據(jù)庫更新成功他爸，則開始更新緩存缩功，否則如果數(shù)據(jù)庫更新失敗，則整個更新過程失敗箫章。 判斷更新緩存是否成功烙荷，如果成功則返回 如...
-
推薦系統(tǒng)之用戶行為分析
最近讀了項亮博士的《推薦系統(tǒng)實踐》，在此對用戶行為分析這章做一個總結(jié)炉抒。 用戶行為介紹 基于用戶行為的推薦奢讨，在學(xué)術(shù)界名為協(xié)同過濾算法。協(xié)同過濾就是指用戶可以齊心協(xié)力焰薄，通過不斷地...
-
數(shù)倉分層模型|簡練實用（推薦收藏）通過閱讀本文拿诸，可以讓你快速了解數(shù)倉如何分層，合理塞茅，實用亩码。筆者堅持原創(chuàng)，根據(jù)實踐總結(jié)野瘦，希望對新手有所幫助描沟。 分層案例 1.電信通訊stage層 ->bdl層 ->analysi...
-
談?wù)勑畔⒐炯夹g(shù)架構(gòu)演變中的必由之路－配置中心配置中心：將依賴于服務(wù)器環(huán)境的變量進行統(tǒng)一的管理飒泻，如：FTP賬號密碼、三方云服務(wù)的服務(wù)地址及相應(yīng)的授權(quán)信息吏廉，以及部分公司內(nèi)部平臺的基本配置泞遗。 配置中心解決什么痛點： 1、將系...
-
有贊 App 動態(tài)化配置中心實踐背景 客戶端大量的硬編碼導(dǎo)致其靈活性大大降低席覆，一些細小的改動只能通過發(fā)布版本解決史辙，用戶升級更新迭代速度慢，時效性差等原因佩伤，催生出了有贊 App 的動態(tài)化配置中心聊倔，它可以將配置...
