首先，我們要知道這兩個方法都是用于數(shù)據(jù)降維。在多變量，大樣本的情況尤為適用。 那么，接下來我將以我理解的最簡單的話來介紹它們，在此說明，若想要嚴謹，數(shù)學證明得大家自己去推。 ...
發(fā)簡信
IP屬地：西藏
-
主成分分析和因子分析易懂介紹 -
hive數(shù)據(jù)傾斜及處理
火山日常啰嗦學習了一些大數(shù)據(jù)的相關框架后，發(fā)現(xiàn)應用層的東西確實不難，真正難的都是底層原理，所以我查看了很多資料，借鑒了前人的方法再加上自己的理解，寫下了這篇文章。 數(shù)據(jù)傾斜的...
-
爬取雪球網(wǎng)優(yōu)化之代理池在之前的文章中，提到如何爬取雪球網(wǎng)用戶的股票數(shù)據(jù)，但是由于爬取過程中，會存在一些問題，比如由于網(wǎng)站設有反爬蟲機制，所以會導致在爬取過程中收到403的response，因此在爬...
-
90、Spark Streaming之updateStateByKey以及基于緩存的實時wordcount程序
updateStateByKey updateStateByKey操作，可以讓我們?yōu)槊總€key維護一份state，并持續(xù)不斷的更新該state。 首先，要定義一個state，...
-
多線程中ThreadLocal踩坑
前言 記錄一下在測試過程中，遇到的一個有關ThreadLocal的問題，順便學習一下ThreadLocal相關的知識。 ThreadLocal介紹 ThreadLocal是一...
-
Gradle 依賴緩存刷新最近組件化項目中使用SNAPSHOT倉庫作為開發(fā)的庫，各個工程師在上面發(fā)布組件的Aar，不同工程師之間可以通過maven依賴來添加組件，但在開發(fā)過程中遇到工程師用Sync P...
