想直接讀取本地文件,比如
val raw= sc.textFile("http://Users/muller/Desktop/people.json")
對不起 ,是要報錯的,如果本地沒有安裝hadoop的話,報連接被拒絕
這個 由于本機已經(jīng)安裝了Hadoop,使用的是偽分布式模式,所以Spark會讀取Hadoop的配置信息.
我們這里先不啟動Hadoop,使用本地模式,要手動添加file:///并使用絕對路徑讀取文本文件
所以使用這種方式的話,就可以了
參考文獻
http://www.voidcn.com/article/p-xkklnlob-b.html
http://blog.csdn.net/slade_sha/article/details/53152642
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時請結(jié)合常識與多方信息審慎甄別。
平臺聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點,簡書系信息發(fā)布平臺,僅提供信息存儲服務(wù)。