一、什么是歸因分析？ 在復雜的數(shù)據(jù)時代，我們每天都會面臨產(chǎn)生產(chǎn)生的大量的數(shù)據(jù)以及用戶復雜的消費行為路徑，特別是在互聯(lián)網(wǎng)廣告行業(yè)，在廣告投放的效果評估上，往往會產(chǎn)生一系列的問題...
發(fā)簡信
IP屬地：北京
-
歸因分析(Attribution Analysis)模型解析 -
時間序列規(guī)則法快速入門
前言 大家好~我是drop-out(GitHub)。今年我參加了IJCAI-17數(shù)據(jù)挖掘競賽和KDD CUP 2017，分別獲得了第三名和第九名。兩個比賽都是時間序列數(shù)據(jù)。我...
-
required a single bean, but 2 were found:
測試中發(fā)現(xiàn)代碼中一個接口的多個實現(xiàn)，注解有誤，造成錯誤 原始代碼如下 接口: public interfaceIPrcCataDataSource {} 接口實現(xiàn)類1： @...
-
RPC框架實踐之：Apache Thrift一、概述 RPC（Remote Procedure Call）即 遠程過程調用，說的這么抽象，其實簡化理解就是一個節(jié)點如何請求另一節(jié)點所提供的服務。在文章 微服務調用鏈追蹤...
-
做python Web開發(fā)你要理解：WSGI & uwsgi
WSGI協(xié)議 首先弄清下面幾個概念：WSGI：全稱是Web Server Gateway Interface，WSGI不是服務器，python模塊，框架，API或者任何軟件，...
-
如何用 Python 和 BERT 做中文文本二元分類？興奮 去年， Google 的 BERT 模型一發(fā)布出來，我就很興奮。 因為我當時正在用 fast.ai 的 ULMfit 做自然語言分類任務（還專門寫了《如何用 Pytho...
-
Spark 推測執(zhí)行(speculative)一speculative簡介 在spark作業(yè)運行中，一個spark作業(yè)會構成一個DAG調度圖，一個DAG又切分成多個stage，一個stage由多個Tesk組成，一個sta...
-
Spark寬依賴與窄依賴
Spark中RDD的高效與DAG（有向無環(huán)圖）有很大的關系，在DAG調度中需要對計算的過程劃分Stage，劃分的依據(jù)就是RDD之間的依賴關系。RDD之間的依賴關系分為兩種，寬...
-
jieba 源碼解析閱讀動機 jieba分詞是Python 里面幾個比較流行的中文分詞工具之一。為了理解分詞工具的工作原理，以及實現(xiàn)細節(jié)對jieba進行了詳細的閱讀。 讀代碼之前，我有幾個問題是...
-
-
Spark map-side-join 關聯(lián)優(yōu)化
將多份數(shù)據(jù)進行關聯(lián)是數(shù)據(jù)處理過程中非常普遍的用法，不過在分布式計算系統(tǒng)中，這個問題往往會變的非常麻煩，因為框架提供的 join 操作一般會將所有數(shù)據(jù)根據(jù) key 發(fā)送到所有的...
-
解決spark中遇到的數(shù)據(jù)傾斜問題
一. 數(shù)據(jù)傾斜的現(xiàn)象 多數(shù)task執(zhí)行速度較快,少數(shù)task執(zhí)行時間非常長，或者等待很長時間后提示你內存不足，執(zhí)行失敗。 二. 數(shù)據(jù)傾斜的原因 常見于各種shuffle操作，...
