Hadoop安装与伪分布式配置

比眉伴天荒 2023-07-24 08:44 93阅读 0赞

文章目录

  • 1.hadoop cdh下载地址
  • 2.下载
  • 3.解压
  • 4.添加环境变量
  • 5.配置Hadoop文件

1.hadoop cdh下载地址

http://archive.cloudera.com/cdh5/cdh/5/

2.下载

  1. wget http://archive.cloudera.com/cdh5/cdh/5/hadoop-2.6.0-cdh5.15.1.tar.gz

也可以scp传输文件

3.解压

  1. tar -zxvf hadoop-2.6.0-cdh5.15.1.tar.gz -C ~/app/

4.添加环境变量

  1. sudo vim /etc/profile   //所有用户添加
  2. export HADOOP_HOME=/home/ubuntu/app/hadoop-2.6.0-cdh5.15.1
  3. export PATH=$PATH:$HADOOP_HOME/bin

20200411082730794.png_pic_center

  1. source /etc/profile
  2. echo $HADOOP_HOME

20200411082855617.png_pic_center

5.配置Hadoop文件

  1. cd $HADOOP_HOME
  2. cd etc/hadoop
  3. vim hadoop-env.sh

20200411083805387.png_pic_center
导入echo $JAVA_HOME的位置

  1. export JAVA_HOME=/usr/lib/jvm/java-11-openjdk-amd64

20200411084115901.png_pic_center
etc/hadoop/core-site.xml:

  1. vim core-site.xml

20200411085528138.png_pic_center

  1. <configuration>
  2.     <property>
  3.         <name>fs.defaultFS</name>
  4.         <value>hdfs://localhost:9000</value>
  5.     </property>
  6. </configuration>

etc/hadoop/hdfs-site.xml:

  1. vim hdfs-site.xml

20200411095010298.png_pic_center

Reference
https://ke.qq.com/course/478249

发表评论

表情：
评论列表 （有 0 条评论，93人围观）

还没有评论，来说两句吧...

相关阅读