Hadoop伪分布式部署(HDFS)

缺乏、安全感 2022-05-24 00:35 308阅读 0赞

环境要求:java、ssh

1.上传并解压tar包
  1. [root@hadoop000 software]# rz #上传hadoop-2.8.1.tar.gz
  2. [root@hadoop000 software]# tar -xzvf hadoop-2.8.1.tar.gz
2.配置环境变量
  1. [root@hadoop000 software]# vi /etc/profile
  2. export HADOOP_HOME=/opt/software/hadoop-2.8.1
  3. export PATH=$HADOOP_HOME/bin:$PROTOC_HOME/bin:$FINDBUGS_HOME/bin:$MAVEN_HOME/bin:$JAVA_HOME/bin:$PATH
  4. [root@hadoop000 software]# source /etc/profile

3.配置文件

  1. [hadoop@hadoop000 ~]# cd /opt/software/hadoop-2.8.1
  2. [hadoop@hadoop000 hadoop-2.8.1]# vi etc/hadoop/core-site.xml
  3. <configuration>
  4. <property>
  5. <name>fs.defaultFS</name>
  6. <value>hdfs://192.168.137.130:9000</value> # 配置自己机器的IP
  7. </property>
  8. </configuration>
  9. [hadoop@hadoop000 hadoop-2.8.1]# vi etc/hadoop/hdfs-site.xml
  10. <configuration>
  11. <property>
  12. <name>dfs.replication</name>
  13. <value>1</value>
  14. </property>
  15. </configuration>
  16. #更改JAVA_HOME
  17. [hadoop@hadoop000 hadoop-2.8.1]# vi etc/hadoop/hadoop-env.sh
  18. # 将export JAVA_HOME=${JAVA_HOME}改为
  19. export JAVA_HOME=/usr/java/jdk1.8.0_45
4.格式化和启动
  1. [hadoop@hadoop000 hadoop-2.8.1]# bin/hdfs namenode -format
  2. [hadoop@hadoop000 hadoop-2.8.1]# sbin/start-dfs.sh
5.检查是否成功
  1. [hadoop@hadoop000 hadoop-2.8.1]# jps
  2. 19536 DataNode
  3. 19440 NameNode
  4. 19876 Jps
  5. 19740 SecondaryNameNode
  6. 访问: http://localhost:50070

发表评论

表情:
评论列表 (有 0 条评论,308人围观)

还没有评论,来说两句吧...

相关阅读

    相关 Hadoop部署分布式

    伪分布式模式也是只需要一台机器,但是与本地模式的不同,伪分布式使用的是分布式的思想,具有完整的分布式文件存储和分布式计算的思想。只不过在进行存储和计算的时候涉及到的相关的守护进

    相关 Centos7分布式部署Hadoop

    前期准备 本教程基于vmware中创建的Centos7虚拟机环境进行教学。vmware中创建虚拟机与安装Centos7系统的步骤这里就不再赘述了,直接从系统安装完成后进行