hadoop(二)—hadoop配置、運(yùn)行錯(cuò)誤總結(jié)

問題一:

【namenode無法啟動(dòng),這個(gè)問題有很多原因,雖然說應(yīng)該參照日志文件進(jìn)行排錯(cuò),但是我試著看了下日志文件,真的是很難看的。不過這里我給出一個(gè)常見的錯(cuò)誤:】
(1)在core-site.xml中指定了如下配置:(就是使用了默認(rèn)的設(shè)置)

<property>
<name>hadoop.tmp.dir</name>
<value>/tmp/hadoop/hadoop-${user.name}</value>
</property>

但是tmp會(huì)在啟動(dòng)的時(shí)候清空,而dfs的數(shù)據(jù)就會(huì)變得不一致,導(dǎo)致啟動(dòng)失敗,可以重新更改位置:

<property>
<name>hadoop.tmp.dir</name>
<value>/var/hadoop/hadoop-${user.name}</value>
</property>
然后執(zhí)行: hadoop namenode -format 命令(由于namenode數(shù)據(jù)存儲(chǔ)目錄變更,namenode需要重新格式化)

重啟后即可。
我出錯(cuò)使用了一個(gè)種比較愚蠢的做法,我把namenode所在的結(jié)點(diǎn)的tmp文件夾和logs文件夾全部刪除,重新創(chuàng)建,然后重新格式化namenode重啟hadoop集群,但是,這么做的結(jié)果就是,我發(fā)現(xiàn)重啟hadoop集群后,namenode是跑起來了可是datanode又跑不起來了,于是我索性將slaves結(jié)點(diǎn)上的tmp文件夾河logs文件夾都刪除重新創(chuàng)建了下,最后格式化namenode,格式化的時(shí)候是沒問題,但是當(dāng)啟動(dòng)的時(shí)候一大堆的問題,體現(xiàn)最明顯的就是權(quán)限問題,我馬上想起來了,因?yàn)槠椒驳脑趓oot和grid用戶之間切換創(chuàng)建文件夾,所以,當(dāng)用grid用戶進(jìn)行某些操作時(shí)就會(huì)出現(xiàn)權(quán)限問題,所以,沒辦法,又得改權(quán)限了(改的時(shí)候先切換到root下再改):

  <span style="font-size:18px;">chown –R grid:grid       /usr/hadoop/tmp  
  sudo chmod -R a+w /usr/local/hadoop</span>  

改完后重新啟動(dòng),就OK了,全部啟動(dòng)沒有問題!

問題二

【使用secureCRT中文亂碼問題:】

1,修改遠(yuǎn)程linux機(jī)器的配置 vim /etc/sysconfig/i18n
把LANG改成支持UTF-8的字符集
如:
LANG=”zh_CN.UTF-8″
或者是
LANG=”en_US.UTF-8″
2,然后再改Secure CRT的設(shè)置
選項(xiàng)->會(huì)話選項(xiàng)->外觀->字符編碼->uft-8
3,退出,再重新登錄。發(fā)現(xiàn)utf8的文件都能正確讀了,utf8的文件名也能正確顯示了

(另外補(bǔ)充一點(diǎn)的是,如果改完后,中文顯示成問號(hào)了,這種情況下,果斷換一個(gè)secure CRT!!!。我就遇到了這情況,換了一個(gè)立馬見效。

這里給大家一個(gè)我試過的沒問題的SecureCRT:http://pan.baidu.com/s/1jG4zXZo

問題三

ecureCRT中文亂碼問題是解決了,那么如何才能讓secureCRT像在linux中一樣顯示有顏色呢?

SecureCRT 設(shè)置彩色和顯示中文】
設(shè)置Options->SessionOptions ->Emulation,然后把Terminal類型改成xterm,并點(diǎn)中ANSI Color復(fù)選框。
字體設(shè)置:Options->SessionOptions->Appearance->font然后改成你想要的字體就可以了。
注意:
1:字符集選擇utf8,這樣可以避免顯示漢字亂碼
2:選擇字體的時(shí)候,需要選擇ture type的字體(如新宋體),不然會(huì)出現(xiàn)漢字亂碼
3:scrollback buffer 調(diào)大(5000),這樣你就可以看到以前顯示內(nèi)容,這樣方便很多
4:terminal要選擇xtem,這樣你ssh到服務(wù)器上才能 顯示顏色 ,并把ANSI Color打上

5:我選擇的顏色方案Windows或Traditional。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時(shí)請(qǐng)結(jié)合常識(shí)與多方信息審慎甄別。
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡(jiǎn)書系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

  • 看到題目有沒有一種高大上的感覺?毛線,當(dāng)前是個(gè)人、是個(gè)公司都在說自己搞大數(shù)據(jù),每天沒有幾個(gè)PB的數(shù)據(jù)入庫,每天沒有...
    丁小晶的晶小丁閱讀 4,643評(píng)論 0 50
  • 1 目的將hadoop 2.7.1 安裝到 166、167、168 三臺(tái)機(jī)器上2 提供環(huán)境練習(xí)環(huán)境192.168....
    灼灼2015閱讀 3,628評(píng)論 4 40
  • 許多人在學(xué)生時(shí)代,大概寫盡了一輩子要寫的字。他們出了學(xué)校,幾乎就不動(dòng)筆了。不過偶爾簽個(gè)名字,寫份合同而已。同樣的,...
    我生在江南閱讀 448評(píng)論 0 2
  • 隨著人們生活節(jié)奏的加快和變化、對(duì)健康要求的越來越高,人們對(duì)早餐的需求也越來越大,因?yàn)檫@些原因70%的消費(fèi)者選擇外出...
    unclecanteen閱讀 567評(píng)論 0 0
  • 1.提升認(rèn)知密度,減少無效閱讀 2.“淺層信息”攝入量很大,以至于抑制了行動(dòng) 當(dāng)你真正埋頭做事的時(shí)候,你平時(shí)那些收...
    Ernest_Chou閱讀 371評(píng)論 0 0

友情鏈接更多精彩內(nèi)容