beeline 方式設(shè)置mapreduce, tez參數(shù)出現(xiàn)錯誤 需要通過參數(shù)hive.security.authorization.sqlstd.confwhitelist...
IP屬地：江蘇
-
Hive 設(shè)置
-
Yarn 隊(duì)列設(shè)置設(shè)置：yarn.resourcemanager.scheduler.class Capacity Scheduler，定義flink、default兩個隊(duì)列，各自50%
-
Hive 分區(qū)locationhttps://blog.csdn.net/MrZhangBaby/article/details/100581183 1.顯示Table和Partition的詳細(xì)信息 2....
-
Hive 數(shù)據(jù)導(dǎo)入 HBase
https://segmentfault.com/a/1190000011616473 一、Hive 跑批1.建表 默認(rèn)第一個字段會作為hbase的rowkey。 2.導(dǎo)入數(shù)...
-
《Prometheus監(jiān)控實(shí)戰(zhàn)》讀書筆記Prometheus是一個開源的監(jiān)控系統(tǒng)。 一、監(jiān)控簡介 監(jiān)控不僅僅只是系統(tǒng)的技術(shù)指標(biāo)，還可以是業(yè)務(wù)指標(biāo)。確保為客戶提供可靠恰當(dāng)?shù)漠a(chǎn)品。在生產(chǎn)系統(tǒng)中，監(jiān)控是必須的，它應(yīng)該和應(yīng)...
-
用PaaS設(shè)施來實(shí)施Devops<br>用Devops方法來實(shí)施PaaS<br><br>開源項(xiàng)目：<br>FlaskIT 一個IT管理網(wǎng)站框架 <br><a href="https://links.jianshu.com/go?to=https%3A%2F%2Fgitee.com%2Fxhua%2FFlaskIT" target="_blank">https://gitee.com/xhua/FlaskIT</a><br>Openshit一鍵部署CICD工具 <br><a href="https://links.jianshu.com/go?to=https%3A%2F%2Fgitee.com%2Fxhua%2FOpenshiftOneClick" target="_blank">https://gitee.com/xhua/OpenshiftOneClick</a><br>Openshift SDK Python <br><a href="https://links.jianshu.com/go?to=https%3A%2F%2Fgithub.com%2Fxhuaustc%2Fopenshift-sdk-python.git" target="_blank">https://github.com/xhuaustc/openshift-sdk-python.git</a><br>云平臺Cloud Python SDK <br><a href="https://links.jianshu.com/go?to=https%3A%2F%2Fgithub.com%2Fxhuaustc%2Fcloud-sdk" target="_blank">https://github.com/xhuaustc/cloud-sdk</a>
-
Spark on yarn 日志收集
Spark on yarn 模式，日志會隨機(jī)分配到某個磁盤。為了Flume收集，需要在提交任務(wù)時通過自定義log4j，再寫一份日志寫到某個固定目錄下。 log4j-execu...
-
Hive 遺留子進(jìn)程頻繁操作HDFS
NameNode日志中頻繁出現(xiàn)rename失敗的日志，且頻繁GC 根據(jù)日志發(fā)現(xiàn)查嘗試rename 文件/apps/hive/warehouse/zs_db.db/umetri...
-
-
Streamsetshttps://streamsets.com/products/dataops-platformhttps://archives.streamsets.com/index.h...
-
-
Beeline doesn't work with -e option when started in background
Beeline doesn't work with -e option when started in background 原帖：http://www.zhangdongs...
-
安裝Ranger UserSync for LDAP
https://cwiki.apache.org/confluence/display/RANGER/Configure+Ranger+UserSync+for+LDAP h...
-
007.Azkaban-3.x 頁面操作手冊1. 創(chuàng)建Flow 使用Azkaban Flow 2.0 來創(chuàng)建任務(wù)流，F(xiàn)low 1.0 將被廢棄 創(chuàng)建一個名為flow20.project的文本文件，添加如下內(nèi)容用以說明這...
-
阿里云官網(wǎng)內(nèi)容平臺！匯聚阿里云優(yōu)質(zhì)內(nèi)容（入門、文檔、案例、最佳實(shí)踐、直播等）！如需轉(zhuǎn)載或內(nèi)容類合作，郵件yqgroup@service.aliyun.com 秒級回復(fù)！<br>
-
阿里云官網(wǎng)（<a href="https://links.jianshu.com/go?to=https%3A%2F%2Fwww.aliyun.com%2F" target="_blank">https://www.aliyun.com/</a>），每日分享最新產(chǎn)品技術(shù)內(nèi)容、官網(wǎng)活動資訊！
-
Spark之Spark Streaming原理一、Spark Streaming概述 Spark Streaming類似于Apache Storm，用于流式數(shù)據(jù)的處理，具有高吞吐量和容錯能力強(qiáng)等特點(diǎn)。Spark Stre...
