Hadoop系列教程：服务器基础环境

﹏ヽ暗。殇╰゛Y 2022-10-01 05:58 141阅读 0赞

虚拟机linux使用的是centos7操作系统

1. 安装sz rz工具，用于以后用rz sz上传下载文件

yum install -y lrzsz

2. 将原来的yum源配置进行备份

mv /etc/yum.repos.d/CentOS-Base.repo /etc/yum.repos.d/CentOS-Base\_repo\_bak

3. 用rz命令将CentOS-Base.repo文件上传文件到当前用户的home目录~

4. 将上传完成的CentOS-Base.repo文件移动到/etc/yum.repos.d/目录

mv ~/CentOS-Base.repo /etc/yum.repos.d/

很多初学者，对大数据的概念都是模糊不清的，大数据是什么，能做什么，学的时候，该按照什么线路去学习，学完往哪方面发展，想深入了解，想学习的同学欢迎到大数据学习交流Qun，606~859~705，(零基础以及进阶的经典实战)与大家分享目前国内最完整的大数据高端实战实用学习流程体系。

5. 删除以前yum配置下的所有缓存数据并根据新的yum源配置新建缓存

yum clean all yum makecache

6. 更新系统中的一个或多个软件包

yum update -y

7. 安装系统常用软件

yum install -y openssh-server vim gcc gcc-c++ glibc-headers bzip2-devel lzo-devel curl wget openssh-clients zlib-devel autoconf automake cmake libtool openssl-devel fuse-devel snappy-devel telnet unzip zip net-tools.x86\_64

8. 关闭防火墙

查看防火墙状态firewall-cmd --state

关闭防火墙systemctl stop firewalld.service

禁止防火墙开机启动 systemctl disable firewalld.service

查看服务是否开机启动 systemctl is-enabled firewalld.service

9. 修改主机名

hostnamectl set-hostname nn1.hadoop

修改完成之后用hostname查看

10. 创建hadoop用户

useradd hadoop

11. 修改hadoop用户密码

用passwd hadoop命令并且输入密码

或者用echo hadoop666 | passwd --stdin hadoop命令直接修改密码

12. 给hadoop用户，配置SSH密钥

sudo us – hadoop 切换到hadoop用户

mkdir ~/.ssh 创建.ssh目录

ssh-keygen -t rsa -f ~/.ssh/id\_rsa -P '' 生成ssh公私钥

cat ~/.ssh/id\_rsa.pub ~/.ssh/authorized\_keys 输出公钥文件内容并且重新输入到~/.ssh/authorized\_keys文件中

chmod 700 ~/.ssh 给~/.ssh文件加上700权限

chmod 600 ~/.ssh/ authorized\_keys 给~/.ssh/ authorized\_keys加上600权限

13. 关闭selinux

查看关闭状态

/usr/sbin/sestatus -v

关闭方法

vim /etc/selinux/config

把文件里的SELINUX=disabled

重启服务器

reboot

启动之后用

/usr/sbin/sestatus -v 查看selinux的修改状态

14. 安装JDK

用rz命令将jdk-8u73-linux-x64.rpm文件上传文件到当前用户的home目录~

用rpm -ivh jdk-8u73-linux-x64.rpm进行安装

执行完上面的命令，一个基础的linux系统就配置好了。然后把这个虚拟机导出，再根据这个导出的虚拟机创建3个linux系统。并用hadoop用户，测试彼此之间是否能进行ssh通信

转载于:https://juejin.im/post/5ce39f736fb9a07ec07f9397

发表评论取消回复

表情：

评论列表（有 0 条评论，141人围观）

还没有评论，来说两句吧...

相关阅读

相关 Hadoop系列之Hadoop环境搭建（一）

环境简介 centos系统 jdk（jdk的安装和配置，请参考[Linux系列之安装jdk（二）][Linux_jdk]） hadoop3.2.1 一、创建had

蔚落/ 2023年05月30日 06:06/ 0 赞/ 121 阅读

相关 Hadoop系列教程：服务器基础环境

　　虚拟机linux使用的是centos7操作系统　　1. 安装sz rz工具，用于以后用rz sz上传下载文件　　yum install -y lrzsz 　　2.

﹏ヽ暗。殇╰゛Y/ 2022年10月01日 05:58/ 0 赞/ 142 阅读

相关《Hadoop基础教程》之初识Hadoop

官方中文指南：http://hadoop.apache.org/docs/r1.0.4/cn/quickstart.html 同类云计算产品 Spark : http://

小咪咪/ 2022年08月08日 11:49/ 0 赞/ 211 阅读

相关《Hadoop基础教程》之初识Hadoop

Hadoop一直是我想学习的技术，正巧最近项目组要做电子商城，我就开始研究Hadoop，虽然最后鉴定Hadoop不适用我们的项目，但是我会继续研究下去，技多不压身。

た入场券/ 2022年07月14日 02:28/ 0 赞/ 213 阅读

相关 Hadoop环境配置教程总结

前言 > 记录一下学习搭建Hadoop环境时看的一些文章正文 1，单机模式 [【Hadoop基础教程】2、Hadoop之单机模式搭建][Hadoop

冷不防/ 2022年07月13日 08:46/ 0 赞/ 234 阅读

相关 Hadoop入门基础教程 Hadoop之完全分布式环境搭建

开发环境 -------------------- 硬件环境：[CentOS][] 6.5 服务器4台（一台为Master节点，三台为Slave节点）软件环境：

﹏ヽ暗。殇╰゛Y/ 2022年06月13日 12:11/ 0 赞/ 193 阅读

相关 Hadoop入门基础教程 Hadoop之完全分布式环境搭建

上一篇我们完成了[Hadoop][]伪分布式环境的搭建，伪分布式模式也叫单节点集群模式， NameNode、SecondaryNameNode、DataNode、JobTrac

蔚落/ 2021年09月26日 04:48/ 0 赞/ 390 阅读

相关 Hadoop入门基础教程 Hadoop之伪分布式环境搭建

伪分布式模式即单节点集群模式，所有的守护进程都运行在同一台机器上。这种模式下增加了代码调试功能，可以查看内存、HDFS文件系统的输入/输出，以及与其他守护进程交互。以[Hado

桃扇骨/ 2021年09月26日 04:46/ 0 赞/ 461 阅读

相关 Hadoop入门基础教程 Hadoop之服务器基础环境搭建

本文以K-Master服务器基础环境配置为例分别演示用户配置、sudo权限配置、网路配置、关闭防火墙、安装JDK工具等。用户需参照以下步骤完成KVMSlave1~KVMSlav

╰半夏微凉°/ 2021年09月26日 04:46/ 0 赞/ 506 阅读

相关《Hadoop基础教程》之初识Hadoop

Hadoop一直是我想学习的技术，正巧最近项目组要做电子商城，我就开始研究Hadoop，虽然最后鉴定Hadoop不适用我们的项目，但是我会继续研究下去，技多不压身。《...

小灰灰/ 2021年02月12日 17:37/ 0 赞/ 628 阅读