CDH大數據安裝手冊--cdh安裝

Cloudera Manager安裝

以下步驟在1號機(host1)上進行。

--安裝cm自帶oracle-j2sdk

sudo yum install -y oracle-j2sdk1.7

--安裝Cloudera?Manager

sudo yum install -y cloudera-manager-daemons cloudera-manager-server

--配置Cloudera Manager數據庫。注意,cm數據庫在mysql配置時已建立。數據庫名和用戶名均為cm,密碼為<參考前面密碼>。msql所在服務器hostname為mysql-host。

/usr/share/cmf/schema/scm_prepare_database.sh mysql -h mysql-host -P 3306 cm cm password

參考結果:

[root@ha-node1 cdh5.11.2]# /usr/share/cmf/schema/scm_prepare_database.sh mysql -h mysql-host -P 3306 cm cm password

JAVA_HOME=/usr/java/jdk1.7.0_67-cloudera

Verifying that we can write to /etc/cloudera-scm-server

Creating SCM configuration file in /etc/cloudera-scm-server

Executing: ?/usr/java/jdk1.7.0_67-cloudera/bin/java -cp /usr/share/java/mysql-connector-java.jar:/usr/share/java/oracle-connector-java.jar:/usr/share/cmf/schema/../lib/* com.cloudera.enterprise.dbutil.DbCommandExecutor /etc/cloudera-scm-server/db.properties com.cloudera.cmf.db.

[main] DbCommandExecutor ?????????????INFO ?Successfully connected to database.

All done, your SCM database is configured correctly!

--啟動Cloudera Manager

sudo service cloudera-scm-server start

監(jiān)測啟動進程日志

tail -f /var/log/cloudera-scm-server/cloudera-scm-server.log

直至出現以下信息,表示Cloudera Manager已成功啟動。

2018-05-05 15:55:08,469 INFO WebServerImpl:org.mortbay.log: Started SelectChannelConnector@0.0.0.0:7180

2018-05-05 15:55:08,469 INFO WebServerImpl:com.cloudera.server.cmf.WebServerImpl: Started Jetty server.

2018-05-05 15:55:08,522 INFO SearchRepositoryManager-0:com.cloudera.server.web.cmf.search.components.SearchRepositoryManager: Finished constructing repo:2018-05-05T07:55:08.522Z

2018-05-05 15:55:08,843 INFO ScmActive-0:com.cloudera.server.cmf.components.ScmActive: ScmActive completed successfully.


CDH安裝和集群配置

--登陸http:// host1:7180, 初始用戶密碼建議用admin / admin


--選免費版,?Cloudera Express



--搜索服務器10.96.109.[1-10],根據需要更改。


--配置parcel url http://host1/cm/cdh5.11.2/?。注意host1是httpd yum源服務器。同時配置cloudera manager agent使用同一yum源,http://host1/cm/

如下圖所示,先移除所有外部parcel路徑。然后增加http://host1/cm/cdh5.11.2/

Parcel directory, local parcel directory均用預設值,不需要修改。

(?注:parcel為CDH的建議安裝包格式。官方下載路徑為https://archive.cloudera.com/cdh5/parcels/5.11.2/?, Centos7.4所需的parcel為CDH-5.11.2-1.cdh5.11.2.p0.4-el7.parcel ??梢灶A先下載并放于httpd服務內,即http://host1/cm/cdh5.11.2/?)



Yum源路徑為jdk和cloudera agent所需。配置為http://host1/cm/

Gpgcheck保留為空。


--如jdk-8u144已經安裝(參考jdk安裝步驟),則此處不需選擇安裝jdk7。否則請安裝jdk7。



--不要勾選single user mode。



--輸入用戶(root),選擇ssh?key(參考前面系統設置-集群節(jié)點互信通信認證


-


--點Continue進行安裝


?著作權歸作者所有,轉載或內容合作請聯系作者
【社區(qū)內容提示】社區(qū)部分內容疑似由AI輔助生成,瀏覽時請結合常識與多方信息審慎甄別。
平臺聲明:文章內容(如有圖片或視頻亦包括在內)由作者上傳并發(fā)布,文章內容僅代表作者本人觀點,簡書系信息發(fā)布平臺,僅提供信息存儲服務。

相關閱讀更多精彩內容

友情鏈接更多精彩內容