假設(shè)說(shuō)我們現(xiàn)在有這樣一張表 問(wèn)題分析 連續(xù)登陸泽裳，也就是在連續(xù)登陸的期間內(nèi)浪藻，后一天和前一天的差值為1务热，不能為大于1的值，直到間斷洁段。那么在這里其實(shí)我們可以設(shè)置一列序號(hào)，如果是連續(xù)...
IP屬地：上海
-
hive實(shí)現(xiàn)用戶連續(xù)登陸的最大天數(shù) -
我們的用戶畫(huà)像
關(guān)于人貨場(chǎng)的一些內(nèi)容：我們的用戶畫(huà)像我們的RFM我們的商品畫(huà)像 不知道從什么時(shí)候開(kāi)始，大家都是一口一個(gè)用戶畫(huà)像免绿，不知道這個(gè)詞兒就好像不知道大數(shù)據(jù)一樣。 在公司這一年時(shí)間擦盾，不說(shuō)...
-
Spark推測(cè)執(zhí)行解決SparkStreaming任務(wù)task卡死問(wèn)題
背景：測(cè)試環(huán)境運(yùn)行一個(gè)SparkStreaming任務(wù)针姿，yarn-cluster模式，duration為5分鐘一個(gè)批次厌衙，每個(gè)批次平均2000w條records距淫，并行度為60 ...
-
Spark性能優(yōu)化指南——基礎(chǔ)篇原文：https://tech.meituan.com/spark-tuning-basic.html Spark性能優(yōu)化指南——基礎(chǔ)篇 前言 在大數(shù)據(jù)計(jì)算領(lǐng)域，Spark已...
-
【面試】HBase面試題
以下大部分題目是從網(wǎng)上搜索得來(lái)婶希，答案是筆者給的榕暇，若有錯(cuò)誤，煩請(qǐng)指出喻杈，謝謝彤枢。 1 每天百億數(shù)據(jù)存入HBase，如何保證數(shù)據(jù)的存儲(chǔ)正確和在規(guī)定的時(shí)間里全部錄入完畢筒饰，不殘留數(shù)據(jù) 答...
-
【Spark實(shí)戰(zhàn)】Spark之讀寫(xiě)HBase1 配置 1.1 開(kāi)發(fā)環(huán)境： HBase：hbase-1.0.0-cdh5.4.5.tar.gz Hadoop：hadoop-2.6.0-cdh5.4.5.tar.gz Zo...
-
第三屆~第八屆Hbase Meetup資料分享
一. 前言 好久沒(méi)有更文了缴啡，說(shuō)來(lái)實(shí)在抱歉，以后會(huì)持續(xù)更文的瓷们，還望大家多多支持业栅。 之前整理了第一屆第二屆Hbase Meetup相關(guān)資料，短短三個(gè)月的時(shí)間谬晕，Hbase 第八屆 ...
