發(fā)簡(jiǎn)信
IP屬地：澳門(mén)
-
Scala 學(xué)習(xí)筆記
Scala 學(xué)習(xí)筆記 1.函數(shù)式編程 函數(shù)式編程：函數(shù)式編程把函數(shù)當(dāng)作一等公民，充分利用函數(shù)，支持函數(shù)的多種使用方式。在scala中，函數(shù)可以像...
-
Scala實(shí)現(xiàn)：KD-Tree(k-dimensional tree)Scala實(shí)現(xiàn)：KD-Tree(k-dimensional tree) kd-tree是一種分割k維數(shù)據(jù)空間的數(shù)據(jù)結(jié)構(gòu)。主要應(yīng)用于多維空間數(shù)據(jù)的...
-
Spark 本地連接OSS
Spark 本地連接OSS 1. 對(duì)象存儲(chǔ) OSS 阿里云對(duì)象存儲(chǔ)服務(wù)（Object Storage Service，簡(jiǎn)稱 OSS），是阿里云提...
-
已知一點(diǎn)經(jīng)緯度及與另一點(diǎn)距離和航向，求另一點(diǎn)經(jīng)緯度
本文結(jié)合Vincenty公式計(jì)算橢圓形地球模型目標(biāo)點(diǎn)的方法 參考資料 http://www.movable-type.co.uk/scripts...
-
Flink 異步I/O
1.為什么需要異步IO flink在做實(shí)時(shí)處理時(shí)，有時(shí)候需要和外部數(shù)據(jù)交互，但是通常情況下這個(gè)交互過(guò)程是同步的，這樣就會(huì)產(chǎn)生大量的等待時(shí)間；而異...
-
大數(shù)據(jù)之統(tǒng)計(jì)學(xué)基礎(chǔ)(二)：隨機(jī)變量及其概率分布
隨機(jī)變量及其概率分布 隨機(jī)變量(r.v)是研究隨機(jī)試驗(yàn)中的一串事件：比如擲一顆骰子，用X表示骰子的點(diǎn)數(shù)，由于X的取值我們無(wú)法確定，所以稱X是一個(gè)...
-
Spark DataFrame中rollup和cube使用
我們平時(shí)在做報(bào)表的時(shí)候，經(jīng)常會(huì)有各種分維度的匯總計(jì)算，在spark中我們最常用的就是groupBy操作，groupBy就是按照給定的字段名分組，...
-
大數(shù)據(jù)之統(tǒng)計(jì)學(xué)基礎(chǔ)(一) -- 描述統(tǒng)計(jì)
描述統(tǒng)計(jì) 1.描述數(shù)據(jù)水平的統(tǒng)計(jì)量 平均數(shù)（平均數(shù)反映了一組數(shù)的平均水平，平均數(shù)會(huì)受到極端值的影響），在計(jì)算時(shí)一般使用算術(shù)平均數(shù)： 分位數(shù)：四分...