發(fā)簡信
IP屬地：陜西
-
Scala 學習筆記
Scala 學習筆記 1.函數(shù)式編程 函數(shù)式編程：函數(shù)式編程把函數(shù)當作一等公民，充分利用函數(shù)腔长，支持函數(shù)的多種使用方式袭祟。在scala中，函數(shù)可以像...
-
Scala實現(xiàn)：KD-Tree(k-dimensional tree)Scala實現(xiàn)：KD-Tree(k-dimensional tree) kd-tree是一種分割k維數(shù)據(jù)空間的數(shù)據(jù)結構捞附。主要應用于多維空間數(shù)據(jù)的...
-
Spark 本地連接OSS
Spark 本地連接OSS 1. 對象存儲 OSS 阿里云對象存儲服務（Object Storage Service巾乳，簡稱 OSS），是阿里云提...
-
已知一點經(jīng)緯度及與另一點距離和航向鸟召，求另一點經(jīng)緯度
本文結合Vincenty公式計算橢圓形地球模型目標點的方法 參考資料 http://www.movable-type.co.uk/scripts...
-
Flink 異步I/O
1.為什么需要異步IO flink在做實時處理時胆绊，有時候需要和外部數(shù)據(jù)交互，但是通常情況下這個交互過程是同步的欧募，這樣就會產(chǎn)生大量的等待時間压状；而異...
-
大數(shù)據(jù)之統(tǒng)計學基礎(二)：隨機變量及其概率分布
隨機變量及其概率分布 隨機變量(r.v)是研究隨機試驗中的一串事件：比如擲一顆骰子，用X表示骰子的點數(shù)跟继，由于X的取值我們無法確定种冬，所以稱X是一個...
-
Spark DataFrame中rollup和cube使用
我們平時在做報表的時候，經(jīng)常會有各種分維度的匯總計算舔糖，在spark中我們最常用的就是groupBy操作娱两，groupBy就是按照給定的字段名分組，...
-
大數(shù)據(jù)之統(tǒng)計學基礎(一) -- 描述統(tǒng)計
描述統(tǒng)計 1.描述數(shù)據(jù)水平的統(tǒng)計量 平均數(shù)（平均數(shù)反映了一組數(shù)的平均水平金吗，平均數(shù)會受到極端值的影響）十兢，在計算時一般使用算術平均數(shù)： 分位數(shù)：四分...