發(fā)簡信
IP屬地：甘肅
-
針對結(jié)巴分詞Memory Error的兩種解決方式
針對結(jié)巴分詞Memory Error的兩種解決方式 一、背景 ? 最近，在使用Gensim Word2vec根據(jù)特定語料訓(xùn)練近義詞模型，模型...
-
SparkML預(yù)測PV背景 公司需要根據(jù)過去一段時間內(nèi)每天網(wǎng)站的流量數(shù)據(jù)，預(yù)測未來一段時間每日流量，這樣，在流量高峰到來前，可以提前警示相關(guān)的運營、運維提前準(zhǔn)備。 這...
-
短文本分類概述
一、行業(yè)現(xiàn)狀 ? 隨著信息技術(shù)的發(fā)展，最稀缺的資源不再是信息本身，而是對信息的處理能力。且絕大多數(shù)信息表現(xiàn)為文本形式，如何在如此大量且復(fù)雜的...
-
記錄Redis事故影響API性能-下篇
背景 線上服務(wù)報大量的Redis，相關(guān)依賴這個服務(wù)的其他產(chǎn)品線服務(wù)也報出同樣的日志。 截圖線上日志 為什么要寫這篇文章 在我的上篇文章中 《記錄...
-
記錄Redis事故影響API性能-上篇背景 線上服務(wù)報大量的Redis，相關(guān)依賴這個服務(wù)的其他產(chǎn)品線服務(wù)也報出同樣的日志。 截圖線上日志image 解決方法： 沒有上線/相關(guān)請求的服...
-
數(shù)據(jù)采集系統(tǒng)的優(yōu)化實戰(zhàn)1 概述 在歷時2個月的不斷優(yōu)化過程中，將數(shù)據(jù)采集系統(tǒng)的處理能力(kafka一個topic)從2.5萬提升到了10萬，基本符合對下一次峰值的要求...
-
Spark OLAP高階分析函數(shù)總結(jié)
我們經(jīng)常困惑在數(shù)據(jù)挖掘和報表分析場景中sql不會寫，或者因為sql太長以至于可讀性降低; 今天我為大家總結(jié)了一些Spark SQL中的高階函數(shù)，...
-
使用ES的快速實現(xiàn)內(nèi)容相似性推薦
問答系統(tǒng)：通過用戶給出的一段描述性文本，通過相似度計算查找與用戶輸入接近的問題相似推薦：用戶在瀏覽當(dāng)前文章時，基于內(nèi)容相似性推薦與本篇文章相似的...
-
仿京東淘寶搜索框?qū)崙?zhàn)搜索是很多內(nèi)容類app必不可少的功能，而搜索框提示則為用戶關(guān)鍵詞輸入提供了一種引導(dǎo)，一個友好的搜索框提示不僅能提升用戶體驗，還能幫助用戶節(jié)省觸達(dá)...