yzhiy

最近很多人都想學(xué)習(xí)大數(shù)據(jù)開發(fā)只厘，但是卻不知道如何開始學(xué)習(xí)忆谓，今天專門整理了一份針對大數(shù)據(jù)初學(xué)者的大數(shù)據(jù)開發(fā)學(xué)習(xí)路線揭斧。 下面分十個章節(jié)來說明大數(shù)據(jù)開發(fā)要學(xué)習(xí)的內(nèi)容： 這里還是要推薦...

yzhiy

雖然一直在接觸這些專業(yè)的名詞，但是一直理解的不深刻命斧，所以今天特地查了一些官方解釋和很多優(yōu)秀的博客文章田晚，將關(guān)于這些方面的理解記了下來，先將這些簡稱做一個解釋： 1国葬、DB（Dat...

yzhiy

一贤徒、概述 本篇文章主要介紹如何使用SparkStreaming + flume + Kafka 實現(xiàn)實時數(shù)據(jù)的計算，并且使用高德地圖API實現(xiàn)熱力圖的展示汇四。 背景知識： 在有...

yzhiy

18年接奈，在做年度復(fù)盤時，回顧了自己過去一年的產(chǎn)品工作通孽，發(fā)現(xiàn)了幾個共性的問題序宦，其中有一個就是：需求場景考慮不全面，開發(fā)過程中還會有需求變更背苦。很不巧互捌，開發(fā)GG們最討厭的就是需求頻...

yzhiy

高并發(fā)系統(tǒng)各不相同行剂。比如每秒百萬并發(fā)的中間件系統(tǒng)秕噪、每日百億請求的網(wǎng)關(guān)系統(tǒng)、瞬時每秒幾十萬請求的秒殺大促系統(tǒng)厚宰。 他們在應(yīng)對高并發(fā)的時候巢价，因為系統(tǒng)各自特點的不同，所以應(yīng)對架構(gòu)都是...

yzhiy

1.單例模式 每個類只能創(chuàng)建一個實例對象 JavaSingleton模式主要作用是保證在Java應(yīng)用程序中测垛，一個類Class只有一個實例存在捏膨。使用Singleton的好處還在...

yzhiy

引言：之前大四的時候覺得大數(shù)據(jù)很火，就嘗試搭建了一個單節(jié)點的hadoop玩過，最近工作慢慢有點空閑就開始搭建3節(jié)點的大數(shù)據(jù)平臺号涯，現(xiàn)在整個大數(shù)據(jù)的生態(tài)圈已經(jīng)完善了很多了目胡，花了一...

yzhiy

由于最近學(xué)習(xí)大數(shù)據(jù)開發(fā)，spark作為分布式內(nèi)存計算框架链快，當(dāng)前十分火熱誉己，因此作為首選學(xué)習(xí)技術(shù)之一。Spark官方提供了三種集群部署方案： Standalone, Mesos,...

yzhiy

個人主頁：http://www.linbingdong.com 簡介 本文主要記錄如何安裝配置Hive on Spark域蜗，在執(zhí)行以下步驟之前韵丑，請先確保已經(jīng)安裝Hadoop集群...

yzhiy

最近在學(xué)習(xí)大數(shù)據(jù)技術(shù)盆赤，朋友叫我直接學(xué)習(xí)Spark磕秤，英雄不問出處当悔，菜鳥不問對錯，于是我就開始了Spark學(xué)習(xí)脉执。 為什么要在Docker上搭建Spark集群 Spark本身提供L...

yzhiy

Hive on Mapreduce Hive的原理大家可以參考這篇大數(shù)據(jù)時代的技術(shù)hive：hive介紹戒劫，實際的一些操作可以看這篇筆記：新手的Hive指南半夷，至于還有興趣看Hi...