一般選項(xiàng) -#, --progress-bar顯示進(jìn)度條 -b, --cookie <name=data>使用cookie。如果沒(méi)有 =, 則表示cookie文件路徑 (參考...
發(fā)簡(jiǎn)信
IP屬地：江西
-
Cassandra數(shù)據(jù)修復(fù)失敗問(wèn)題
背景 為了保證cassandra不同節(jié)點(diǎn)數(shù)據(jù)的一致性，需要定期進(jìn)行repair操作。但是，當(dāng)數(shù)據(jù)量達(dá)到一定規(guī)模時(shí)，repair操作并不簡(jiǎn)單，經(jīng)常會(huì)遇到這樣那樣的問(wèn)題，導(dǎo)致修復(fù)...
-
《用戶思維+：好產(chǎn)品讓用戶為自己尖叫》讀后感這本書(shū)一開(kāi)始就拋出關(guān)于好產(chǎn)品的定義，觀點(diǎn)非常明確：好產(chǎn)品就是要成就用戶，讓用戶變得卓越。然后，深入剖析了具體如何操作來(lái)協(xié)助用戶一步步成就卓越。 我?guī)е坝脩簟钡慕巧x完了這本...
-
SparkML預(yù)測(cè)PV背景 公司需要根據(jù)過(guò)去一段時(shí)間內(nèi)每天網(wǎng)站的流量數(shù)據(jù)，預(yù)測(cè)未來(lái)一段時(shí)間每日流量，這樣，在流量高峰到來(lái)前，可以提前警示相關(guān)的運(yùn)營(yíng)、運(yùn)維提前準(zhǔn)備。 這是個(gè)典型的“時(shí)序預(yù)測(cè)問(wèn)題”，關(guān)...
-
SparkML預(yù)測(cè)PV
背景 公司需要根據(jù)過(guò)去一段時(shí)間內(nèi)每天網(wǎng)站的流量數(shù)據(jù)，預(yù)測(cè)未來(lái)一段時(shí)間每日流量，這樣，在流量高峰到來(lái)前，可以提前警示相關(guān)的運(yùn)營(yíng)、運(yùn)維提前準(zhǔn)備。 這是個(gè)典型的“時(shí)序預(yù)測(cè)問(wèn)題”，關(guān)...
-
Spark參數(shù)調(diào)優(yōu)之locality wait背景 工作中使用Spark Streaming處理實(shí)時(shí)數(shù)據(jù)流，發(fā)現(xiàn)所處理的數(shù)據(jù)量與所消耗的時(shí)間很不對(duì)等，如下圖： 區(qū)區(qū)幾KB的數(shù)據(jù)，簡(jiǎn)單的mapToPair操作，竟然耗時(shí)4~...
-
Clickhouse中update/delete的使用
從使用場(chǎng)景來(lái)說(shuō)，Clickhouse是個(gè)分析型數(shù)據(jù)庫(kù)。這種場(chǎng)景下，數(shù)據(jù)一般是不變的，因此Clickhouse對(duì)update、delete的支持是比較弱的，實(shí)際上并不支持標(biāo)準(zhǔn)的...
-
Mac Launchpad(啟動(dòng)臺(tái)）圖標(biāo)大小調(diào)整Mac在采用高分辨率模式下，Launchpad會(huì)變超級(jí)大，占用過(guò)多空間不宜立刻尋找到App。 可以通過(guò)調(diào)整Launchpad每一行、和每一列圖標(biāo)的數(shù)量，來(lái)調(diào)整Launchpa...
-
Cassandra運(yùn)維工具-Reaper安裝與使用Reaper是什么 Reaper是專門用于執(zhí)行Cassandra數(shù)據(jù)修復(fù)操作的可視化工具。 當(dāng)然，除了核心功能外，也提供了其他一些功能，例如，快照管理，集群基本信息、狀態(tài)等。...
-
MySQL遠(yuǎn)程訪問(wèn)權(quán)限
版本：5.6.43 授權(quán)： 說(shuō)明：以上命令表示允許root用戶在ip服務(wù)器上遠(yuǎn)程訪問(wèn)database庫(kù)的table表；ip為%，表示不限ip；database.table可用...
-
Spark Dataframe 自增ID (Java版)
背景 用Spark作數(shù)據(jù)計(jì)算框架，將計(jì)算結(jié)果寫入傳統(tǒng)關(guān)系數(shù)據(jù)庫(kù)，例如MySQL，供業(yè)務(wù)查詢，這是工作中經(jīng)常使用的模式。 在寫入MySQL時(shí)，經(jīng)常要加個(gè)自增的ID字段。 第一種...
-
Elasticsearch分頁(yè)查詢總結(jié)
使用 from / size 分頁(yè) from - 表示起始位置，size - 表示每頁(yè)數(shù)量；類似與 MySQL 的 limit + offset。示例： 需要注意的是，fro...
-
Cassandra導(dǎo)出導(dǎo)入CSV
進(jìn)入cqlsh命令行模式，可導(dǎo)出、導(dǎo)入數(shù)據(jù)表。 導(dǎo)出 可以指定導(dǎo)出某幾列： 導(dǎo)入 如果csv文件的表頭與table的列順序不同怎么辦？通過(guò)指定列名即可：
-
命令行調(diào)用Dubbo服務(wù)
Dubbo 服務(wù)端支持 telnet 調(diào)用，具體如下： telnet 連接到 dubbo 服務(wù)端 查看服務(wù)端接口列表 查看某接口的方法列表 調(diào)用接口方法
-
Couchbase 5.x錯(cuò)誤代碼12015解決
背景 我們的應(yīng)用場(chǎng)景，Couchbase某個(gè)bucket的索引非常大，有2億多個(gè)文檔，我們需要把這所有數(shù)據(jù)遷移到hdfs中。 為此，需要先獲取所有文檔ID，然后，遍歷ID，獲...
-
@tasselmi 并存
Clickhouse集群應(yīng)用、分片、復(fù)制
簡(jiǎn)介 通常生產(chǎn)環(huán)境我們會(huì)用集群代替單機(jī)，主要是解決兩個(gè)問(wèn)題： 效率 穩(wěn)定 如何提升效率？一個(gè)大大大任務(wù)，讓一個(gè)人干需要一年，拆解一下讓12個(gè)人同時(shí)干，可能只需要1個(gè)月。對(duì)于數(shù)...
