筆者最近學習jvm 的內存模型，這里根據下面幾個模塊來做個總結： 1.jvm的內存模型 2.jvm gc原理 jvm的內存模型 jvm 的內存模型實現很復雜，但是工作中經常接...
發(fā)簡信
IP屬地：上海
-
-
hadoop 小文件處理方案
hadoop hdfs 被設計用作海量數據存儲，適合存儲大文件，文件在hdfs中是以block的形式存儲的，在hadoop 1.x中，hdfs block的默認大小為64m，...
-
spark 相關總結spark 部署有幾種模式spark 可分為單機模式和集群模式集群模式又可分為standalone獨立集群模式，yarn 集群模式和mesos集群模式圖為spark 集群架構...
-
-
spark on hbase 讀寫本文主要講述了spark對hbase進行獨寫的兩種方式，這兩種方式分別為：1.利用spark提供的 newAPIHadoopRDD api 對hbase進行讀寫2.Spark...