Hadoop分布式环境配置(1)

以你之姓@ 2023-01-18 09:13 103阅读 0赞

# 系列文章目录 #

[Hadoop分布式环境配置(1)][Hadoop_1]  
[Hadoop分布式环境配置(2)][Hadoop_2]  
[Hadoop分布式环境配置(3)][Hadoop_3]  
[Hadoop分布式环境配置(4)][Hadoop_4]  
[Hadoop分布式环境配置(5)][Hadoop_5]

--------------------

### 文章目录 ###

*  系列文章目录
 *  前言
 *  网络配置
 *   *  查看网络连接模式
     *  查看DHCP分配的网段
     *  查看 NAT模式的网关地址
 *  设计集群
 *  静态IP配置
 *  配置域名服务器
 *  CentOS7防火墙
 *  总结

--------------------

# 前言 #

在 CentOS7 系统快速配置Hadoop，仅需配置主节点，配置完成后将Hadoop文件及jdk文件发送给从节点，即可完成分布式集群部署，本节主要介绍网络配置

--------------------

# 网络配置 #

## 查看网络连接模式 ##

1.  右键选择虚拟机  
    ![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80NTExODE4MA_size_16_color_FFFFFF_t_70_pic_center]
2.  点击 **设置**
3.  网络适配器  
    ![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80NTExODE4MA_size_16_color_FFFFFF_t_70_pic_center 1]

## 查看DHCP分配的网段 ##

1.  编辑 -> 虚拟网络编辑器  
    ![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80NTExODE4MA_size_16_color_FFFFFF_t_70_pic_center 2]
2.  点击 **DHCP设置** 按钮
3.  查看分配的网段  
    ![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80NTExODE4MA_size_16_color_FFFFFF_t_70_pic_center 3]
4.  根据起始IP地址和结束IP地址选择设置节点的IP地址(必须在此范围内)

## 查看 NAT模式的网关地址 ##

1.  编辑 -> 虚拟网络编辑器
2.  点击 **NAT设置** 按钮
3.  查看网关地址  
    ![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80NTExODE4MA_size_16_color_FFFFFF_t_70_pic_center 4]

# 设计集群 #

*  网络连接模式：NAT模式
 *  主节点：
    
     *  主机名：s201 IP：192.168.142.201
 *  从节点：
    
     *  主机名：s202 IP：192.168.142.202
     *  主机名：s203 IP：192.168.142.203
     *  主机名：s204 IP：192.168.142.204

# 静态IP配置 #

1.  切换root用户
    
        su root
2.  编辑 **/etc/sysconfig/network-scripts/ifcfg-eno16777736**
    
    1.  备份文件
        
            cd /etc/sysconfig/network-scripts
            cp ifcfg-eno16777736 ifcfg-eno16777736.bak
    2.  编辑 **ifcfg-eno16777736**
        
            vi /etc/sysconfig/network-scripts/ifcfg-eno16777736
        
        1.  NAT模式
            
                TYPE=Ethernet					
                BOOTPROTO=none					
                DEFROUTE=yes					
                IPV4_FAILURE_FATAL=no			
                IPV6INIT=no
                IPV6_AUTOCONF=no
                IPV6_DEFROUTE=no
                IPV6_PEERDNS=no
                IPV6_PEERROUTES=no
                IPV6_FAILURE_FATAL=no
                NAME=eno16777736
                UUID=33f3ce5f-8b5c-41af-90ed-863736e09c29
                DEVICE=eno16777736
                # 重点修改以下部分
                ONBOOT=yes
                IPADDR=192.168.142.201	# 当前节点的IP地址
                PREFIX=24			   # 子网前缀(网络号长度，相当于255.255.255.0)
                GATEWAY=192.168.142.2	# 网关地址
                DNS=192.168.154.2		# 与网关地址相同
        2.  如果使用桥接模式，则配置文件为
            
                TYPE=Ethernet					
                BOOTPROTO=static					
                DEFROUTE=yes					
                IPV4_FAILURE_FATAL=no			
                IPV6INIT=no
                IPV6_AUTOCONF=no
                IPV6_DEFROUTE=no
                IPV6_PEERDNS=no
                IPV6_PEERROUTES=no
                IPV6_FAILURE_FATAL=no
                NAME=eno16777736
                UUID=33f3ce5f-8b5c-41af-90ed-863736e09c29
                DEVICE=eno16777736
                # 重点修改以下部分
                ONBOOT=yes
                IPADDR=192.168.154.201	# 与自己网卡的网段一样(网络号一样，主机号不一样)
                PREFIX=24			   # 子网前缀(网络号长度，相当于255.255.255.0)
                GATEWAY=192.168. 154.2	# 网关地址(与网卡一致)
                DNS=192.168.154.2		# 与网关地址相同
            
            查看自己网卡IP的方法
            
            1.  win + R ，输入cmd进入命令提示符
            2.  输入ipconfig 查看自己的IP地址和网关地址
    3.  编辑文件完成后退出输入
        
            :wq		# 不要忘记 ":"
3.  重启网络服务
    
        su root
        service network restart
4.  查看IP是否正确配置
    
        ip addr

# 配置域名服务器 #

解决通过ip能够访问网络，通过域名无法访问的问题

1.  编辑 **/etc/resolv.conf** , 添加域名服务器，内容是网关地址
    
        vi /etc/resolv.conf
    
    输入，nameserver后面为网关地址
    
        nameserver 192.168.142.2
2.  编辑完成保存退出
    
        :wq		# 不要忘记 ":"
3.  测试连接百度服务器
    
        ping www.baidu.com
4.  测试完成退出，按 Ctrl + Z

# CentOS7防火墙 #

*  启动防火墙
    
        sudo systemctl start firewalld.service
 *  关闭防火墙
    
        sudo systemctl stop firewalld.service
 *  查看防火墙状态
    
        sudo systemctl status firewalld.service
 *  开机自启
    
        sudo systemctl enable firewalld.service		#"开机启动"启用
        sudo systemctl disable firewalld.service	#"开机自启"禁用
 *  开机自启
    
        sudo systemctl enable firewalld.service		#"开机启动"启用
        sudo systemctl disable firewalld.service	#"开机自启"禁用

--------------------

# 总结 #

以上就是今天要讲的内容，本文仅仅简单介绍了Hadoop的前期配置准备，对Linux进行网络、IP和主机名等配置，以便后期建立Hadoop集群。

[Hadoop_1]: https://blog.csdn.net/weixin_45118180/article/details/116354179
[Hadoop_2]: https://blog.csdn.net/weixin_45118180/article/details/113705827
[Hadoop_3]: https://blog.csdn.net/weixin_45118180/article/details/116354472
[Hadoop_4]: https://blog.csdn.net/weixin_45118180/article/details/116354598
[Hadoop_5]: https://blog.csdn.net/weixin_45118180/article/details/116376126
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80NTExODE4MA_size_16_color_FFFFFF_t_70_pic_center]: /images/20221021/69a667f85ad34f7eae30b367a60f531d.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80NTExODE4MA_size_16_color_FFFFFF_t_70_pic_center 1]: /images/20221021/efca4979bee7413e978577256c87894b.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80NTExODE4MA_size_16_color_FFFFFF_t_70_pic_center 2]: /images/20221021/248cef012ad24c1da290b8a47b4a994f.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80NTExODE4MA_size_16_color_FFFFFF_t_70_pic_center 3]: /images/20221021/3f10c772ff66435fb1c1da6d8eba4ff0.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80NTExODE4MA_size_16_color_FFFFFF_t_70_pic_center 4]: /images/20221021/3484ffa809b1438eb362b7fd865a6395.png