上一篇博客主要講了HDFS的組成部分和機制,這篇博客給大家講講如何安裝、配置、啟動HDFS
這次講的HDFS是偽分布式的(單臺服務(wù)器)
1. 下載和解壓Hadoop1.2.1
下載
wget http://mirrors.ustc.edu.cn/apache/hadoop/common/hadoop-1.2.1/hadoop-1.2.1.tar.gz
解壓
tar -zxvf hadoop-1.2.1.tar.gz
2.配置Hadoop
輸入命令
vi hadoop-1.2.1/conf/hadoop-env.sh
配置好jdk
# The java implementation to use. Required.
export JAVA_HOME=/usr/lib/jvm/java-8-openjdk-amd64
修改core-site.xml
vi hadoop-1.2.1/conf/core-site.xml
<configuration>
<property>
<name>fs.default.name</name>
<value>hdfs://localhost:9000</value>
</property>
</configuration>
修改core-site.xml
vi hadoop-1.2.1/conf/hdfs-site.xml
<configuration>
<property>
<name>dfs.replication</name>
<value>1</value>
</property>
</configuration>
修改mapred-site.xml
vi hadoop-1.2.1/conf/mapred-site.xml
<configuration>
<property>
<name>mapred.job.tracker</name>
<value>localhost:9001</value>
</property>
</configuration>
修改masters
vi hadoop-1.2.1/conf/masters
localhsot
3. ssh免密登錄
生成公鑰和私鑰
ssh-keygen -t rsa -P ""
將公鑰追加到文件
cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys
測試
ssh localhost
若不用輸入密碼,則證明ssh免密登錄配置成功
4. 啟動hdfs
hadoop-1.2.1/bin/start-dfs.sh
輸入命令,檢查是否啟動成功
jps
若出現(xiàn)NameNode,DataNode,SecondNameNode則證明啟動成功
或者訪問 該服務(wù)器外網(wǎng)IP地址:50070
若出現(xiàn)該頁面則證明啟動成功
這里寫圖片描述