hadoop分布式集群安装

秒速五厘米 2023-02-14 06:48 105阅读 0赞

搭建分布式集群的前提安装步骤需要每一台机器都要执行（jdk安装，ip配置，主机名设置，hosts文件配置，关闭防火墙，免密登录）
免密登录注意，至少确保主节点可以免密登录到其他从节点

  1. ssh-copy-id -i hadoop144
  2. ssh-copy-id -i hadoop145

部署架构：一主两从

  1. master:hadoop124(192.168.8.124)
  2. slave：hadoop144(192.168.8.144)
  3.          : hadoop145(192.168.8.145)

1：把 hadoop-3.2.1.tar.gz 安装包上传到 linux 机器的/data/soft 目录下
2：解压 hadoop 安装包

  1. [root@hadoop124 ~]# cd /data/soft 
  2. [root@hadoop124 soft]# tar -zxvf hadoop-3.2.1.tar.gz
  3. [root@hadoop124 soft]# cd hadoop-3.2.1/etc/hadoop/

修改hadoop-env.sh，增加环境变量

  1. export JAVA_HOME=/data/soft/jdk1.8 
  2. export HADOOP_LOG_DIR=/data/hadoop_repo/logs/hadoop

修改core-site.xml

  1. <configuration>
  2.     <property>
  3.         <name>fs.defaultFS</name> 
  4.         <value>hdfs://hadoop124:9000</value>

发表评论

表情：
评论列表 （有 0 条评论，105人围观）

还没有评论，来说两句吧...

相关阅读

    相关 hadoop分布式集群安装

    搭建分布式集群的前提安装步骤需要每一台机器都要执行（jdk安装，ip配置，主机名设置，hosts文件配置，关闭防火墙，免密登录） 免密登录注意，至少确保主节点可以免密登录到

    秒速五厘米秒速五厘米/ 0 赞/ 106 阅读

    相关 hadoop完全分布式集群安装

    因为机器学习，接触到了数据挖掘；因为数据挖掘，接触到了大数据；因为大数据，接触到了hadoop。之前有过hadoop的简单了解，但都是基于别人提供的hadoop来学习和使用，虽

    清疚清疚/ 0 赞/ 339 阅读