安裝： 配置： 后臺運行及關(guān)閉 配置文件 superset_config.py文件里進行一些定制： 資源文件修改，例如修改pie圖的數(shù)字格式等： 其他 回頭繼續(xù)補充
發(fā)簡信
IP屬地：北京
-
superset安裝搭建及配置
-
linux下gcc、g++不同版本的安裝和切換
Ubuntu 18.04預(yù)裝GCC版本為7.3,但有時在編譯是需要用的不同gcc版本，下面介紹，如何安裝不同的gcc 和g++，并設(shè)置根據(jù)不同的需要在不同版本之間切換。 1....
-
hadoop 集群 rebalance 和磁盤 均衡在我們使用hadoop集群的時候 ，由于 日志 數(shù)據(jù)不斷流入寫入到hdfs上，而且 算法人員 不斷的清洗 數(shù)據(jù)做特征工程 又會產(chǎn)生 新的中間數(shù)據(jù) ，而且量一點都不小。這個時...
-
flink cep，使用groovy腳本及表達式求值
提要：使用表達式求值和groovy腳本來生成flink cep Pattern。減少代碼量，一份代碼可通過傳script腳本的方式生成不同的pattern。1.source ...
-
hive 獲取自然周
選擇一個周一的相對日期 比如 2018-01-01 是周一 假如當(dāng)前時間是 p0,那查詢當(dāng)前時間的自然周的周一日期 跨年自然周的處理 現(xiàn)象： 查詢當(dāng)前日期是這一年的第幾周 可...
-
python中partial的使用規(guī)則
前天看到了partial的一個新用法，記錄一下。 概念 函數(shù)聲明如下： 返回一個可以像函數(shù)一樣被調(diào)用的partial實例，在調(diào)用時使用args和keywords參數(shù)。使用py...
-
生產(chǎn)HDFS Block副本缺失或者副本損壞恢復(fù)
一、文件 上傳： 校驗健康狀態(tài): 二、直接DN節(jié)點上刪除文件一個block的一個副本(3副本） 刪除塊和meta文件： 直接重啟HDFS，直接模擬損壞效果，然后fsck檢查:...
-
Spring Boot @Configuration 不生效今天朋友發(fā)過來一個項目，結(jié)構(gòu)如下 項目下的這個CorsConfig 類中的方法沒有放入Bean工廠，經(jīng)過日志打印，發(fā)現(xiàn)這個 類并沒有被Bean 掃描到，經(jīng)網(wǎng)上搜索，發(fā)現(xiàn)原來s...
-
snakeyaml was not found on the classpath 錯誤
springboot 程序啟動報如下錯誤 Attempted to load applicationConfig: classpath:/application.yml]bu...
-
數(shù)倉--Hive--元數(shù)據(jù)表結(jié)構(gòu)學(xué)習(xí)以Hive2.3.4為例進行學(xué)習(xí) 元數(shù)據(jù)表總覽 一共有57張表，大致分類下：image.png 版本表VERSION 如果該表出現(xiàn)問題，根本進入不了Hive-Cli。比如該表...
-
Kettle 郵件發(fā)送附件Kettle 郵件發(fā)送附件 最近用戶個需求，利用kettle分析出的數(shù)據(jù)，通過郵件的形式，發(fā)送給本人。這里講解下kettle發(fā)送郵件的方法。 首先說明下，用到的kettle組...
-
Flink 源碼之AsyncFunction
Flink源碼分析系列文檔目錄 請點擊：Flink 源碼分析系列文檔目錄[http://www.itdecent.cn/p/d4a372809e3d] 簡介 Flink的特...
-
注解@Slf4j的使用注解@Slf4j的使用 聲明:如果不想每次都寫private final Logger logger = LoggerFactory.getLogger(當(dāng)前類名.class...
-
Spark 實現(xiàn)MySQL update操作
背景 目前 spark 對 MySQL 的操作只有 Append,Overwrite,ErrorIfExists,Ignore幾種表級別的模式，有時我們需要對表進行行級別的操...
-
Flink利用State進行統(tǒng)計
一. 托管State 1.1 主程序 構(gòu)建 StreamExecutionEnvironment； 啟動 Checkpoint，并設(shè)置間隔時間； 設(shè)置 StateBacken...
-
Flink重點難點：Flink任務(wù)綜合調(diào)優(yōu)(Checkpoint/反壓/內(nèi)存)
CheckPoint調(diào)優(yōu) Flink中基于異步輕量級的分布式快照技術(shù)提供了Checkpoints容錯機制，Checkpoints可以將同一時間點作業(yè)/算子的狀態(tài)數(shù)據(jù)全局統(tǒng)一快...
-
Flink1.10.0讀取并插入Hive1.2.1
FLink讀取+插入Hive數(shù)據(jù)入坑指南 Flink1.9以上版本可以使用hivecatalog讀取Hive數(shù)據(jù)，但是1.9對于Hive的版本支持不太友好，只支持2.3.4和...
