CDH大數(shù)據(jù)安裝手冊(cè)--cdh安裝

Cloudera Manager安裝

以下步驟在1號(hào)機(jī)(host1)上進(jìn)行。

--安裝cm自帶oracle-j2sdk

sudo yum install -y oracle-j2sdk1.7

--安裝Cloudera?Manager

sudo yum install -y cloudera-manager-daemons cloudera-manager-server

--配置Cloudera Manager數(shù)據(jù)庫(kù)。注意,cm數(shù)據(jù)庫(kù)在mysql配置時(shí)已建立。數(shù)據(jù)庫(kù)名和用戶名均為cm,密碼為<參考前面密碼>。msql所在服務(wù)器hostname為mysql-host。

/usr/share/cmf/schema/scm_prepare_database.sh mysql -h mysql-host -P 3306 cm cm password

參考結(jié)果:

[root@ha-node1 cdh5.11.2]# /usr/share/cmf/schema/scm_prepare_database.sh mysql -h mysql-host -P 3306 cm cm password

JAVA_HOME=/usr/java/jdk1.7.0_67-cloudera

Verifying that we can write to /etc/cloudera-scm-server

Creating SCM configuration file in /etc/cloudera-scm-server

Executing: ?/usr/java/jdk1.7.0_67-cloudera/bin/java -cp /usr/share/java/mysql-connector-java.jar:/usr/share/java/oracle-connector-java.jar:/usr/share/cmf/schema/../lib/* com.cloudera.enterprise.dbutil.DbCommandExecutor /etc/cloudera-scm-server/db.properties com.cloudera.cmf.db.

[main] DbCommandExecutor ?????????????INFO ?Successfully connected to database.

All done, your SCM database is configured correctly!

--啟動(dòng)Cloudera Manager

sudo service cloudera-scm-server start

監(jiān)測(cè)啟動(dòng)進(jìn)程日志

tail -f /var/log/cloudera-scm-server/cloudera-scm-server.log

直至出現(xiàn)以下信息,表示Cloudera Manager已成功啟動(dòng)。

2018-05-05 15:55:08,469 INFO WebServerImpl:org.mortbay.log: Started SelectChannelConnector@0.0.0.0:7180

2018-05-05 15:55:08,469 INFO WebServerImpl:com.cloudera.server.cmf.WebServerImpl: Started Jetty server.

2018-05-05 15:55:08,522 INFO SearchRepositoryManager-0:com.cloudera.server.web.cmf.search.components.SearchRepositoryManager: Finished constructing repo:2018-05-05T07:55:08.522Z

2018-05-05 15:55:08,843 INFO ScmActive-0:com.cloudera.server.cmf.components.ScmActive: ScmActive completed successfully.


CDH安裝和集群配置

--登陸http:// host1:7180, 初始用戶密碼建議用admin / admin


--選免費(fèi)版,?Cloudera Express



--搜索服務(wù)器10.96.109.[1-10],根據(jù)需要更改。


--配置parcel url http://host1/cm/cdh5.11.2/?。注意host1是httpd yum源服務(wù)器。同時(shí)配置cloudera manager agent使用同一yum源,http://host1/cm/

如下圖所示,先移除所有外部parcel路徑。然后增加http://host1/cm/cdh5.11.2/

Parcel directory, local parcel directory均用預(yù)設(shè)值,不需要修改。

(?注:parcel為CDH的建議安裝包格式。官方下載路徑為https://archive.cloudera.com/cdh5/parcels/5.11.2/?, Centos7.4所需的parcel為CDH-5.11.2-1.cdh5.11.2.p0.4-el7.parcel ??梢灶A(yù)先下載并放于httpd服務(wù)內(nèi),即http://host1/cm/cdh5.11.2/?)



Yum源路徑為jdk和cloudera agent所需。配置為http://host1/cm/

Gpgcheck保留為空。


--如jdk-8u144已經(jīng)安裝(參考jdk安裝步驟),則此處不需選擇安裝jdk7。否則請(qǐng)安裝jdk7。



--不要勾選single user mode。



--輸入用戶(root),選擇ssh?key(參考前面系統(tǒng)設(shè)置-集群節(jié)點(diǎn)互信通信認(rèn)證


-


--點(diǎn)Continue進(jìn)行安裝


?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時(shí)請(qǐng)結(jié)合常識(shí)與多方信息審慎甄別。
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡(jiǎn)書系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

友情鏈接更多精彩內(nèi)容