Hadoop（一）Hadoop环境搭建

迈不过友情╰ 2022-04-05 07:18 400阅读 0赞

# 环境要求 #

*  JDK8
 *  Hadoop2.6

# 步骤 #

## 一、下载 ##

点击 [Hadoop下载][Hadoop]

## 二、安装Hadoop ##

安装Hadoop之前先确保JDK已经安装好

新建一个名为hadoop的目录将安装包解压到该目录下

> mkdir hadoop  
> tar -zxvf hadoop-2.6.5.tar.gz

## 三、配置环境变量 ##

编辑/etc/profile,加入如下配置：

export HADOOP_HOME=/root/hadoop/hadoop-2.6.5   
    export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin

刷新一下

> source /etc/profile

输入hadoop version测试是否生效：  
![在这里插入图片描述][20181211142632658.png]

## 四、配置文件 ##

*  配置 /hadoop-2.6.5/etc/hadoop/core-site.xml

<configuration>
    
        <property>
            <name>fs.defaultFS</name>
            <value>hdfs://centos:9000</value>
        </property>
    
        <property>
            <name>hadoop.tmp.dir</name>
            <value>/hadoop/hadoopData</value>
        </property>
    </configuration>

*  配置/hadoop-2.6.5/etc/hadoop/hdfs-site.xml

<configuration>
    
        <property>
            <name>dfs.replication</name>
            <value>1</value>
        </property>
    </configuration>

## 五、启动、测试 ##

### 启动hdfs步骤： ###

*  启动之前需要先格式化hdfs（这一步操作一般是用于第一次启动hdfs时候初始化，只需操作一次以后都不用在操作）

> hadoop namenode -format  
> ![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L291bXV2_size_16_color_FFFFFF_t_70]

*  启动hdfs

> [start-dfs.sh][]

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L291bXV2_size_16_color_FFFFFF_t_70 1]  
这一条命令执行后将会要求输入3次密码，分别启动一个SecondaryNameNode、NameNode、DataNode

*  使用浏览器访问 [http://localhost:50070/][http_localhost_50070] 将会看见如下界面  
    ![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L291bXV2_size_16_color_FFFFFF_t_70 2]
 *  stop-dfs.sh停止hdfs

> [stop-dfs.sh][]

# 搭建完成 #

[Hadoop]: http://mirror.cc.columbia.edu/pub/software/apache/hadoop/common/
[20181211142632658.png]: /images/20220405/164fa0e3e7b44a538982888cf6a00428.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L291bXV2_size_16_color_FFFFFF_t_70]: /images/20220405/d29fa81d94c24eacb28bf4ba0c085018.png
[start-dfs.sh]: http://start-dfs.sh
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L291bXV2_size_16_color_FFFFFF_t_70 1]: /images/20220405/feb8151cb8064de5bfd502856b62cafe.png
[http_localhost_50070]: http://localhost:50070/
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L291bXV2_size_16_color_FFFFFF_t_70 2]: /images/20220405/0a5e1ee2390f414398e734cf12e833f2.png
[stop-dfs.sh]: http://stop-dfs.sh