IP屬地：北京
-
對數收益率推導過程
收益率計算公式： ( 期末資產 - 期初資產 ) / 期初資產對數收益率：ln ( 期末資產 / 期初資產 )Rt 指日收益率 ； Pt 指...
-
【數倉】sqoop踩坑記錄
import 從mysql導出時select column不能聲明字段的導出順序，只能起到篩選作用。 import 嚴格按照mysql字段的存儲...
-
一種圖結構的數據可視化方法GraphStream是構建在Spark GraphX之上的第三方圖可視化工具。它雖然不屬于Spark項目，但對GraphX的支持很好，而且和G...
-
基于GraphFrames的圖計算方法
Spark生態(tài)有GraphX的圖計算模塊。但它有諸多缺點： 性能差，不能從DataFrame和Catalyst查詢優(yōu)化器提供的性能改進中受益。 ...
-
【數倉】spark工作原理與階段劃分
概念解釋： Driver和Executor是Spark作業(yè)的工作進程，兩者是協作關系，前者負責調度，后者負責執(zhí)行。application / j...
-
【數倉】Hive數倉的explode()炸裂函數詳解
我們知道數倉不滿足第一范式，也就是說數倉中的字段是可再分的，不滿足原子性，即DDL可以定義一個字段類型為數組。因此才有了explode()函數，...
-
【數倉】對比spark-hive的兩種分布式計算模式
最近在學習過程中發(fā)現SparkSQL、Hive on Spark、Spark on Hive是非常容易混淆的的概念。了解三者的關系前，先要先明白...
-
【后端】Nginx反向代理后獲取客戶端真實IP地址
用Nginx反向代理后，原先的HttpServletRequest獲取到的ip地址變成了反向代理服務器的地址。 要獲取客戶端的真實ip，修改ng...