608.【hadoop】windows上hadoop測試環(huán)境的搭建步驟

一、下載hadoop安裝包:

點擊下載


解壓。

二、下載hadoop在windows中的依賴:

點擊下載

下載完成之后,解壓,將3.2.2目錄下的所有文件替換hadoop的bin目錄下的文件:


并將hadoop.dll 文件復制到C:\Windows\System32 目錄:

三、配置環(huán)境變量:

HADOOP_HOME= D:\cloudwave\hadoop-3.2.2
Path中添加 %HADOOP_HOME%\bin; 

四、創(chuàng)建數據目錄

在hadoop-3.2.2目錄下創(chuàng)建data目錄,data目錄下創(chuàng)建namenode和datanode存儲目錄
data\namenode
data\datanode


五、修改hadoop-env.cmd


進入目錄 \etc\hadoop
修改hadoop-env.cmd
set JAVA_HOME=D:\v4_dev_env\jdk-8(指定hadoop使用java版本)
JDK使用1.8版本(版本過高可能會不兼容)。

六、修改配置文件

  1. etc\hadoop目錄,修改hdfs-site.xml
<configuration>
    <property>
        <name>dfs.replication</name>
        <value>1</value>
    </property>
    <property>
        <name>dfs.namenode.name.dir</name>
        <value>H:\\workspace_env\\hadoop-3.2.2\\data\\namenode</value>
    </property>
    <property>
        <name>dfs.datanode.data.dir</name>
        <value>H:\\workspace_env\\hadoop-3.2.2\\data\\datanode</value>
    </property>

</configuration>
  1. etc\hadoop目錄,修改core-site.xml
<configuration>
    <property>
        <name>fs.defaultFS</name>
        <value>hdfs://localhost:9000</value>
    </property>
</configuration>

七、啟動

  1. 進入hadoop-3.2.2\bin目錄,以管理員身份打開“命令提示符“
    輸入hdfs namenode -format,看到seccessfully就說明format成功。如下圖所示:


  2. 進入hadoop-3.2.2\sbin目錄
    輸入start-dfs.cmd,啟動hdfs。
    出現以下namenode和datanode窗口


    namenode

    datanode
  3. 瀏覽器訪問:http://127.0.0.1:9870/

  • 可以看到已經,在windows上運行起來了
?著作權歸作者所有,轉載或內容合作請聯系作者
【社區(qū)內容提示】社區(qū)部分內容疑似由AI輔助生成,瀏覽時請結合常識與多方信息審慎甄別。
平臺聲明:文章內容(如有圖片或視頻亦包括在內)由作者上傳并發(fā)布,文章內容僅代表作者本人觀點,簡書系信息發(fā)布平臺,僅提供信息存儲服務。

相關閱讀更多精彩內容

友情鏈接更多精彩內容