Hadoop日記——安裝、配置、啟動HDFS

上一篇博客主要講了HDFS的組成部分和機制,這篇博客給大家講講如何安裝、配置、啟動HDFS

這次講的HDFS是偽分布式的(單臺服務(wù)器)

1. 下載和解壓Hadoop1.2.1

下載

wget http://mirrors.ustc.edu.cn/apache/hadoop/common/hadoop-1.2.1/hadoop-1.2.1.tar.gz

解壓

 tar -zxvf hadoop-1.2.1.tar.gz

2.配置Hadoop

輸入命令

vi hadoop-1.2.1/conf/hadoop-env.sh 

配置好jdk

# The java implementation to use.  Required.
export JAVA_HOME=/usr/lib/jvm/java-8-openjdk-amd64

修改core-site.xml

vi hadoop-1.2.1/conf/core-site.xml
<configuration>
     <property>
         <name>fs.default.name</name>
         <value>hdfs://localhost:9000</value>
     </property>
</configuration>

修改core-site.xml

vi hadoop-1.2.1/conf/hdfs-site.xml
<configuration>
     <property>
         <name>dfs.replication</name>
         <value>1</value>
     </property>
</configuration>

修改mapred-site.xml

vi hadoop-1.2.1/conf/mapred-site.xml
<configuration>
     <property>
         <name>mapred.job.tracker</name>
         <value>localhost:9001</value>
     </property>
</configuration>

修改masters

vi hadoop-1.2.1/conf/masters
localhsot

3. ssh免密登錄

生成公鑰和私鑰

ssh-keygen -t rsa -P ""

將公鑰追加到文件

cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys

測試

ssh localhost

若不用輸入密碼,則證明ssh免密登錄配置成功

4. 啟動hdfs

hadoop-1.2.1/bin/start-dfs.sh 

輸入命令,檢查是否啟動成功

jps

若出現(xiàn)NameNodeDataNode,SecondNameNode則證明啟動成功

或者訪問 該服務(wù)器外網(wǎng)IP地址:50070
若出現(xiàn)該頁面則證明啟動成功

這里寫圖片描述

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時請結(jié)合常識與多方信息審慎甄別。
平臺聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點,簡書系信息發(fā)布平臺,僅提供信息存儲服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

  • Spring Cloud為開發(fā)人員提供了快速構(gòu)建分布式系統(tǒng)中一些常見模式的工具(例如配置管理,服務(wù)發(fā)現(xiàn),斷路器,智...
    卡卡羅2017閱讀 136,711評論 19 139
  • 1.Linux安裝前的配置 1.1.關(guān)閉防火墻 本站文檔是假定「服務(wù)器在防火墻以內(nèi)」的前提下編纂的,在這個前提下...
    lao男孩閱讀 3,488評論 0 4
  • 版權(quán)聲明:本文為博主原創(chuàng)文章,未經(jīng)博主允許不得轉(zhuǎn)載。 目錄-[-]1 先決條件2 實驗環(huán)境搭建 21 準(zhǔn)備工...
    三三At你閱讀 942評論 0 3
  • 努力的女生運氣不會差,努力的女生渾身煥發(fā)著魅力,真的好美! 文|甘果 01 梅梅跟喬琳是大學(xué)同班同學(xué),大學(xué)畢業(yè)之后...
    深夜告白閱讀 630評論 0 1
  • 第八章改變環(huán)境以改變孩子不可接受的行為 1豐富孩子的環(huán)境內(nèi)容 在車庫或后院的一角設(shè)立一個特殊區(qū)域,讓孩子可以自由的...
    海上明月明閱讀 258評論 0 0

友情鏈接更多精彩內(nèi)容