發(fā)簡(jiǎn)信
IP屬地：上海
-
Azkaban的安裝及使用
LinkedIn開(kāi)源的任務(wù)調(diào)度框架，Azkaban的安裝及使用 Azkaban的安裝https://blog.csdn.net/hg_harve...
-
Kafka 生產(chǎn)者調(diào)優(yōu)講解樣例代碼中的參數(shù)含義： buffer.memory 參數(shù)是什么意思？ Kafka的客戶(hù)端發(fā)送數(shù)據(jù)到服務(wù)器，一般都是要經(jīng)過(guò)緩沖的，也就是說(shuō)，你...
-
log4j_使用
在pom文件中添加依賴(lài)包 在resources目錄下創(chuàng)建 log4j.properties 配置文件 代碼中使用
-
spark優(yōu)化技巧(四)
算子調(diào)優(yōu) 4.1 MapPartitions提升Map類(lèi)操作性能 spark中，最基本的原則，就是每個(gè)task處理一個(gè)RDD的partition...
-
linux_關(guān)于網(wǎng)絡(luò)
ip 分為 網(wǎng)絡(luò)位 和 主機(jī)位 ; 由于ipv4 數(shù)量不夠使用, 為了解決這個(gè)問(wèn)題就出現(xiàn)了 私有ip 地址; a類(lèi)地址: 10.0.0.0 ...
-
linux_awk
awk的工作模式: 將文本數(shù)據(jù)先進(jìn)行一行一行做分割,再以某種定義將行數(shù)據(jù)分割為字段數(shù)據(jù),形成基本的數(shù)據(jù)單位, 然后執(zhí)行awk中的代碼; 字段: ...