發(fā)簡信
IP屬地：廣東
-
通過代理服務(wù)訪問 HDFS 集群背景 在 HDFS 使用過程中，有時會需要一個類似代理的機制，即：通過一臺或多臺代理服務(wù)器，來代理某一批機器的 HDFS 訪問。需要注意的是，大...
-
KMS 對 HDFS 性能影響測試報告測試環(huán)境 測試使用現(xiàn)網(wǎng)機器，各項指標(biāo)如下，KMS Server 所使用的 JVM 參數(shù)均取默認(rèn)值（KMS Server 并非內(nèi)存占用型進程，內(nèi)存...
-
借助 KMS (Hadoop Key Management Server) 實現(xiàn) HDFS 數(shù)據(jù)加密原生 KMS 模型 概覽 適用場景 將 DataNode 上的數(shù)據(jù) block 加密存放，這樣即使惡意用戶通過某種方式繞過了權(quán)限控制，或直接訪問...
-
高網(wǎng)絡(luò)時延情況下提升HDFS IO速度背景 有時候，Hadoop 的計算集群和存儲集群之間，可能會有非常大的網(wǎng)絡(luò)延遲（例如異地部署的情況），會影響 HDFS IO 效率。具體而言： ...
-
Observer NN性能測試結(jié)果及部署注意事項
背景 Observer NameNode 可以處理客戶端的讀請求，以此來分擔(dān) Active NameNode 的壓力，從而整體上提升 NameN...
-
Ozone 介紹Ozone 是什么 一句話介紹：Ozone 是一個分布式對象存儲系統(tǒng)，從屬于 Hadoop 生態(tài)，支持海量數(shù)據(jù)存儲，具有良好的擴展性。 為什么需...
-
RangerHDFS 部署流程
依賴 依賴項作用備注MySQLRangerAdmin 用來存儲規(guī)則等數(shù)據(jù)需要在 RangerAdmin 上部署，RangerAdmin 可以選擇...
-
在 HDFS 中使用 Ranger介紹 Apache Ranger 提供一個集中式安全管理框架來解決授權(quán)和審計問題，它可以對 Hadoop 生態(tài)的組件如 HDFS、Yarn、Hi...
-
使用 FairCallQueue 提升 NameNode RPC 服務(wù)質(zhì)量問題描述 HDFS 集群中，有時會因為 NameNode 的超負(fù)荷運行，導(dǎo)致部分用戶的請求響應(yīng)緩慢，甚至得不到響應(yīng)。 原因分析 這種阻塞情況是由...