發(fā)簡信
IP屬地：新疆
-
Scala 學(xué)習(xí)筆記
Scala 學(xué)習(xí)筆記 1.函數(shù)式編程 函數(shù)式編程：函數(shù)式編程把函數(shù)當(dāng)作一等公民绎签，充分利用函數(shù)掀泳，支持函數(shù)的多種使用方式崎逃。在scala中伐割，函數(shù)可以像...
-
Scala實(shí)現(xiàn)：KD-Tree(k-dimensional tree)Scala實(shí)現(xiàn)：KD-Tree(k-dimensional tree) kd-tree是一種分割k維數(shù)據(jù)空間的數(shù)據(jù)結(jié)構(gòu)。主要應(yīng)用于多維空間數(shù)據(jù)的...
-
Spark 本地連接OSS
Spark 本地連接OSS 1. 對象存儲 OSS 阿里云對象存儲服務(wù)（Object Storage Service换途，簡稱 OSS）咬荷，是阿里云提...
-
已知一點(diǎn)經(jīng)緯度及與另一點(diǎn)距離和航向，求另一點(diǎn)經(jīng)緯度
本文結(jié)合Vincenty公式計算橢圓形地球模型目標(biāo)點(diǎn)的方法 參考資料 http://www.movable-type.co.uk/scripts...
-
Flink 異步I/O
1.為什么需要異步IO flink在做實(shí)時處理時迷捧，有時候需要和外部數(shù)據(jù)交互织咧，但是通常情況下這個交互過程是同步的，這樣就會產(chǎn)生大量的等待時間漠秋；而異...
-
大數(shù)據(jù)之統(tǒng)計學(xué)基礎(chǔ)(二)：隨機(jī)變量及其概率分布
隨機(jī)變量及其概率分布 隨機(jī)變量(r.v)是研究隨機(jī)試驗(yàn)中的一串事件：比如擲一顆骰子笙蒙，用X表示骰子的點(diǎn)數(shù)，由于X的取值我們無法確定膛堤，所以稱X是一個...
-
Spark DataFrame中rollup和cube使用
我們平時在做報表的時候手趣，經(jīng)常會有各種分維度的匯總計算，在spark中我們最常用的就是groupBy操作肥荔，groupBy就是按照給定的字段名分組绿渣，...
-
大數(shù)據(jù)之統(tǒng)計學(xué)基礎(chǔ)(一) -- 描述統(tǒng)計
描述統(tǒng)計 1.描述數(shù)據(jù)水平的統(tǒng)計量 平均數(shù)（平均數(shù)反映了一組數(shù)的平均水平，平均數(shù)會受到極端值的影響）燕耿，在計算時一般使用算術(shù)平均數(shù)： 分位數(shù)：四分...