深入解讀Spark-core的源碼，掌握Spark的核心機(jī)制
發(fā)簡(jiǎn)信
IP屬地：北京
-
-
hive insert overwrite hdfs(hive輸出結(jié)果導(dǎo)出到hdfs) 錯(cuò)誤近日將原來(lái)MR 處理到etl 部分轉(zhuǎn)移到Hive Serde 處理導(dǎo)出到HDFS的時(shí)候，Hive導(dǎo)出過(guò)程出錯(cuò)caused by: java.io.IOException: C...
-
hadoop 無(wú)法load Native庫(kù)的問(wèn)題（ Unable to load native-hadoop library ）
此問(wèn)題的緣由一般來(lái)說(shuō)有兩種 hadoop 2.6 及之前的版本官方提供的二進(jìn)制包本地庫(kù)多數(shù)都是32-bit的，而現(xiàn)在服務(wù)器基本都是64bit，所以存在這個(gè)問(wèn)題，這樣一般解決辦...
-
Hadoop節(jié)點(diǎn)的磁盤RAID
當(dāng)搭建hadoop集群的時(shí)候首先要注意的是節(jié)點(diǎn)的磁盤選型，這對(duì)hadoop集群的讀寫和高可用有著很重要的影響 以下是對(duì)Hadoop集群節(jié)點(diǎn)的磁盤配置建議： HDFS Name...