yzhiy

最近很多人都想學(xué)習(xí)大數(shù)據(jù)開發(fā)斯碌，但是卻不知道如何開始學(xué)習(xí)，今天專門整理了一份針對大數(shù)據(jù)初學(xué)者的大數(shù)據(jù)開發(fā)學(xué)習(xí)路線钞诡。 下面分十個章節(jié)來說明大數(shù)據(jù)開發(fā)要學(xué)習(xí)的內(nèi)容： 這里還是要推薦...

yzhiy

雖然一直在接觸這些專業(yè)的名詞朵诫，但是一直理解的不深刻，所以今天特地查了一些官方解釋和很多優(yōu)秀的博客文章薄扁，將關(guān)于這些方面的理解記了下來剪返，先將這些簡稱做一個解釋： 1、DB（Dat...

yzhiy

一邓梅、概述 本篇文章主要介紹如何使用SparkStreaming + flume + Kafka 實(shí)現(xiàn)實(shí)時數(shù)據(jù)的計算脱盲，并且使用高德地圖API實(shí)現(xiàn)熱力圖的展示。 背景知識： 在有...

yzhiy

18年震放，在做年度復(fù)盤時宾毒，回顧了自己過去一年的產(chǎn)品工作，發(fā)現(xiàn)了幾個共性的問題，其中有一個就是：需求場景考慮不全面诈铛，開發(fā)過程中還會有需求變更乙各。很不巧，開發(fā)GG們最討厭的就是需求頻...

yzhiy

高并發(fā)系統(tǒng)各不相同耳峦。比如每秒百萬并發(fā)的中間件系統(tǒng)、每日百億請求的網(wǎng)關(guān)系統(tǒng)焕毫、瞬時每秒幾十萬請求的秒殺大促系統(tǒng)蹲坷。 他們在應(yīng)對高并發(fā)的時候，因?yàn)橄到y(tǒng)各自特點(diǎn)的不同邑飒，所以應(yīng)對架構(gòu)都是...

yzhiy

1.單例模式 每個類只能創(chuàng)建一個實(shí)例對象 JavaSingleton模式主要作用是保證在Java應(yīng)用程序中玖姑，一個類Class只有一個實(shí)例存在。使用Singleton的好處還在...

yzhiy

引言：之前大四的時候覺得大數(shù)據(jù)很火慨菱，就嘗試搭建了一個單節(jié)點(diǎn)的hadoop玩過客峭，最近工作慢慢有點(diǎn)空閑就開始搭建3節(jié)點(diǎn)的大數(shù)據(jù)平臺，現(xiàn)在整個大數(shù)據(jù)的生態(tài)圈已經(jīng)完善了很多了抡柿，花了一...

yzhiy

由于最近學(xué)習(xí)大數(shù)據(jù)開發(fā)，spark作為分布式內(nèi)存計算框架等恐，當(dāng)前十分火熱洲劣，因此作為首選學(xué)習(xí)技術(shù)之一。Spark官方提供了三種集群部署方案： Standalone, Mesos,...

yzhiy

個人主頁：http://www.linbingdong.com 簡介 本文主要記錄如何安裝配置Hive on Spark课蔬，在執(zhí)行以下步驟之前囱稽，請先確保已經(jīng)安裝Hadoop集群...

yzhiy

最近在學(xué)習(xí)大數(shù)據(jù)技術(shù)，朋友叫我直接學(xué)習(xí)Spark二跋，英雄不問出處战惊，菜鳥不問對錯，于是我就開始了Spark學(xué)習(xí)扎即。 為什么要在Docker上搭建Spark集群 Spark本身提供L...

yzhiy

Hive on Mapreduce Hive的原理大家可以參考這篇大數(shù)據(jù)時代的技術(shù)hive：hive介紹况凉，實(shí)際的一些操作可以看這篇筆記：新手的Hive指南，至于還有興趣看Hi...