發(fā)簡信
IP屬地：湖北
-
Scala 學(xué)習(xí)筆記
Scala 學(xué)習(xí)筆記 1.函數(shù)式編程 函數(shù)式編程：函數(shù)式編程把函數(shù)當(dāng)作一等公民，充分利用函數(shù)，支持函數(shù)的多種使用方式。在scala中，函數(shù)可以像...
-
Scala實現(xiàn)：KD-Tree(k-dimensional tree)Scala實現(xiàn)：KD-Tree(k-dimensional tree) kd-tree是一種分割k維數(shù)據(jù)空間的數(shù)據(jù)結(jié)構(gòu)。主要應(yīng)用于多維空間數(shù)據(jù)的...
-
Spark 本地連接OSS
Spark 本地連接OSS 1. 對象存儲 OSS 阿里云對象存儲服務(wù)（Object Storage Service，簡稱 OSS），是阿里云提...
-
已知一點經(jīng)緯度及與另一點距離和航向，求另一點經(jīng)緯度
本文結(jié)合Vincenty公式計算橢圓形地球模型目標(biāo)點的方法 參考資料 http://www.movable-type.co.uk/scripts...
-
Flink 異步I/O
1.為什么需要異步IO flink在做實時處理時，有時候需要和外部數(shù)據(jù)交互，但是通常情況下這個交互過程是同步的，這樣就會產(chǎn)生大量的等待時間；而異...
-
大數(shù)據(jù)之統(tǒng)計學(xué)基礎(chǔ)(二)：隨機變量及其概率分布
隨機變量及其概率分布 隨機變量(r.v)是研究隨機試驗中的一串事件：比如擲一顆骰子，用X表示骰子的點數(shù)，由于X的取值我們無法確定，所以稱X是一個...
-
Spark DataFrame中rollup和cube使用
我們平時在做報表的時候，經(jīng)常會有各種分維度的匯總計算，在spark中我們最常用的就是groupBy操作，groupBy就是按照給定的字段名分組，...
-
大數(shù)據(jù)之統(tǒng)計學(xué)基礎(chǔ)(一) -- 描述統(tǒng)計
描述統(tǒng)計 1.描述數(shù)據(jù)水平的統(tǒng)計量 平均數(shù)（平均數(shù)反映了一組數(shù)的平均水平，平均數(shù)會受到極端值的影響），在計算時一般使用算術(shù)平均數(shù)： 分位數(shù)：四分...