在CSDN、簡書看了很多解答,并沒有解決問題,浪費了寶貴的學習時間。 本著知其然,也要知其所以然的精神,研究了各位前輩們的方法,終于找到了問題所在,下面開始復盤。 一、問題發(fā)...
在CSDN、簡書看了很多解答,并沒有解決問題,浪費了寶貴的學習時間。 本著知其然,也要知其所以然的精神,研究了各位前輩們的方法,終于找到了問題所在,下面開始復盤。 一、問題發(fā)...
背景 Kafka原本集群磁盤擴容后,新建topic的業(yè)務量較大,存在數(shù)據(jù)積壓。一段時間后收到集群節(jié)點報警,部分磁盤使用率到達90%警戒值。經(jīng)過檢查發(fā)現(xiàn)問題節(jié)點各磁盤使用率不均...
最近在看一些在學習一些源碼,在源碼中經(jīng)常會看到一些位移運算符的使用,比如在看HashMap源碼的時候,在計算hashMap容量的閾值的時候,就使用到了位移運算符,代碼如下: ...
本篇主要介紹使用linux自帶的相關(guān)配置方法限制sftp用戶的用戶權(quán)限與限制某特定端口的上傳下載速度。 參考文檔: 限制ssh用戶只能用于SFTP登錄且只能訪問指定目錄, 只...
白天沒事兒刷微博,偶然看到了這個消息 會SQL就能搞AI?這么溜嗎前幾年一窩蜂的到處都是大數(shù)據(jù),然后大家都去搞大數(shù)據(jù);這幾年一窩蜂的到處都是數(shù)據(jù)分析,然后大家都去搞數(shù)據(jù)分析,...
前言 遇到開發(fā)環(huán)境是內(nèi)網(wǎng),項目第一次搭建的時候需要安裝許多的python三方模塊除了手動一個個安裝,有時候還要處理相互依賴的模塊,費時費力能不能像在 外網(wǎng) 環(huán)境一樣,在 內(nèi)網(wǎng)...
前言 這是一篇科普性質(zhì)的文章,希望能過用一個通俗易懂的例子給非計算機專業(yè)背景的朋友講清楚大數(shù)據(jù)分布式計算技術(shù)。大數(shù)據(jù)技術(shù)雖然包含存儲、計算和分析等一系列龐雜的技術(shù),但分布式計...
我發(fā)現(xiàn)TBLPROPERTIES ("EXTERNAL"="TRUE")里面true要大寫
Hive的內(nèi)部表和外部表之間相互轉(zhuǎn)換1,內(nèi)部表轉(zhuǎn)換為外部表,EXTERNAL大寫 ALTER TABLE tablename SET TBLPROPERTIES ('EXTERNAL' = 'true');修...
什么是JMM內(nèi)存模型 內(nèi)存模型可以理解為在特定的操作協(xié)議下,對特定的內(nèi)存或高速緩存進行讀寫訪問的過程抽象描述,不同架構(gòu)下的物理機擁有不一樣的內(nèi)存模型。 JMM(Java內(nèi)存模...
allowed_networks: ["172.0.0.0/8"] 后面的那個8代表什么意思?
clickhouse + chproxy 集群搭建集群規(guī)劃 集群架構(gòu) 其中 Distribute 是指創(chuàng)建分布式表的機器,在此文章中是將 Distribute 單獨部署的,也可以將 Distribute 角色劃分到每個 Re...
數(shù)據(jù)類型 基礎類型 基礎類型只有三種 數(shù)值、字符串、時間 數(shù)值1.1 數(shù)值類型 int (用int8 int16 int32 int64 代表tinyint smallint...
背景 集群切換服務器IP地址,重啟網(wǎng)絡提示空間不足,經(jīng)排查發(fā)現(xiàn)Oracle數(shù)據(jù)庫數(shù)據(jù)存儲在系統(tǒng)路徑下,將空間占滿,應是安裝時配置錯誤導致,需修改路徑騰出空間。 1. 修改系統(tǒng)...
簡介:公司實時項目組處理的業(yè)務數(shù)據(jù)以前是由業(yè)務團隊把數(shù)據(jù)push到rabbit mq,然后我們通過flink轉(zhuǎn)運到kafka,然后再做實時計算的,由于新業(yè)務邏輯變化會較大,導...
kafka部署的問題 1. 連接zookeeper超時 kafka.zookeeper.ZooKeeperClientTimeoutException: Timed out ...
* 更新說明 2015.11.14更新 在區(qū)段元素的強調(diào)欄增加刪除線和空格的標記方法將表格、流程圖和時序圖等不常用的語法移至Markdown進階語法整理 關(guān)于Markdown...
摘要 本文將介紹常用parquet文件讀寫的幾種方式1.用spark的hadoopFile api讀取hive中的parquet格式2.用sparkSql讀寫hive中的pa...
/boot/config.txt增加hdmi_force_hotplug=1后,開機畫面一閃就黑屏了,還好vnc連接上去是正常的, 再增加hdmi_drive=2又正常顯示桌面了.
樹莓派 設置HDMI分辨率設置分辨率為 1920*1080 60Hz 修改如下: 之后重啟樹莓派 參考 CEA分辨率 以下是CEA規(guī)定的電視規(guī)格分辨率。這些分辨率的hdmi_group=1。 DMT分...
設置分辨率為 1920*1080 60Hz 修改如下: 之后重啟樹莓派 參考 CEA分辨率 以下是CEA規(guī)定的電視規(guī)格分辨率。這些分辨率的hdmi_group=1。 DMT分...