發(fā)簡信
IP屬地：湖北
-
java同步塊
Java同步關(guān)鍵字（synchronized） Java中的同步塊用synchronized標(biāo)記勋乾。同步塊在Java中是同步在某個對象上联四。所有同步...
-
BitMap&布隆過濾器一.BitMap BitMap算法流程 假設(shè)需要排序或者查找的最大數(shù)MAX=10000000（lz:這里MAX應(yīng)該是最大的數(shù)而不是int數(shù)據(jù)的總...
-
前臺系統(tǒng)本地緩存和分布式緩存實現(xiàn)方案
根據(jù)緩存是否與應(yīng)用進(jìn)程屬于同一進(jìn)程荠诬，可以將內(nèi)存分為本地緩存和分布式緩存。本地緩存是在同一個進(jìn)程內(nèi)的內(nèi)存空間中緩存數(shù)據(jù)耙箍，數(shù)據(jù)讀寫都是在同一個...
-
網(wǎng)站點擊流量數(shù)據(jù)分析案例
1.通過flume，實時收集服務(wù)器上的日志信息，sink到hdfs 2.使用mapreduce對數(shù)據(jù)進(jìn)行清洗和校驗扮饶，規(guī)整出可建表的數(shù)據(jù)，進(jìn)而創(chuàng)建...
-
Azkaban&SqoopAzkaban 1.為什么需要工作流調(diào)度系統(tǒng) 一個完整的數(shù)據(jù)分析系統(tǒng)通常都是由大量任務(wù)單元組成： shell腳本程序乍构，java程序甜无，mapred...
-
Flume日志采集框架Flume 1 Flume介紹 1.概述 Flume是一個分布式、可靠哥遮、和高可用的海量日志采集岂丘、聚合和傳輸?shù)南到y(tǒng)。 有問題：并未實現(xiàn)...
-
HA機(jī)制一. 概念 所謂HA眠饮，即高可用（7*24小時不中斷服務(wù)） 實現(xiàn)高可用最關(guān)鍵的是消除單點故障 hadoop-ha嚴(yán)格來說應(yīng)該分成各個組件的HA機(jī)制...
-
Coding1.基礎(chǔ)：wordCount 2.三個重要自定義接口：partitioner奥帘、combiner、自定義排序（WritableComparator...
-
Hive
Day1 基礎(chǔ)： 1.hive是做什么的仪召？hive的特性寨蹋，應(yīng)用場景 2.hive內(nèi)部組成 jar松蒜、Thrift、元數(shù)據(jù)服務(wù)（如何和mysql交互...