需要重新編譯spark , 默認(rèn)spark中的hive-exec. 不認(rèn)識(shí)hive.metastore.glue.catalogid、hive....
spark executor memory = spark executor memory * 0.4 + spark executor mem...
合并證書freeipa要求必須要有完整的證書鏈,完整的證書鏈包含 域名證書、域名的中間證書、域名證書的密鑰、根證書一般的證書提供商所提供的證書下...
下載 Dinky 1.0.3 版本到 EC2 ,解壓,本文假設(shè) Dinky 安裝目錄在/opt/dinky/ dinky-release-1.1...
用helm 方式比較方便,不然需要手動(dòng)修改好多yaml 美中不足,這兩個(gè)ingress-controller 不通的namespace ,配置文...
nginx proxy每次請(qǐng)求都會(huì)自動(dòng)生成一個(gè)request_id 方便追蹤請(qǐng)求。 很多時(shí)候我們使用的架構(gòu)并不是nginx直接對(duì)應(yīng)到后端app,...
prometheus-stack的數(shù)據(jù)持久化需要通過prometheus-opreate 配置。 prometheus 通過污點(diǎn)、容忍調(diào)度到ma...
1、spark-shell 提交任務(wù)以后,終端超時(shí),實(shí)際任務(wù)不退出,造成資源一直計(jì)費(fèi)。需要進(jìn)入到spark-gateway 機(jī)器上手動(dòng)kill ...
構(gòu)建spark docker 鏡像下載spark-2.4.8-bin-hadoop2.7.tgz Note: 這里下載spark包一定不是能是w...