Linux: 各项目部署记录

男娘i 2023-10-09 23:21 27阅读 0赞

### 一. 前言 ###

每次换便宜的服务器都要导致环境重新部署一遍，十分麻烦。

于是把每次部署的脚本整理了一下，方便在服务器上快速进行部署。

基于 CentOS~~~

### 二. 环境篇 ###

#### 2.1 yum 安装 ####

通常情况下 yum 是默认集成的，如果出现 yum 未集成的情况，按照如下步骤进行安装 ：

// S1 : 查询 yum 版本（判断是否安装）
    sudo yum version
    
    // S2 : 安装 epel-release软件仓库
    sudo yum install epel-release
    
    // S3 : 安装 yum
    sudo yum install yum
    
    // S4 : 更新 yum
    sudo yum update
    
    
    // 其他问题 ： 
    failovermethod=priority in /etc/yum.repos.d/CentOS-Epel.repo; 
    Configuration: OptionBinding with id "failovermethod" does not exist
    - 1： sudo vim /etc/yum.repos.d/CentOS-Epel.repo
    - 2： 注释掉 # failovermethod=priority
    - 3： sudo yum update 更新系统
    
    Failed to download metadata for repo 'appstream': 
    Cannot prepare internal mirrorlist: No URLs in mirrorlist
    - 由于 centOS 停止维护带来的问题，需要修改 mirro地址
    - 1： 进入 repo 管理 cd /etc/yum.repos.d/
    - 2： 修改全局地址 
        - sed -i 's/mirrorlist/#mirrorlist/g' /etc/yum.repos.d/CentOS-*
        - sed -i 's|#baseurl=http://mirror.centos.org|baseurl=http://vault.centos.org|g' /etc/yum.repos.d/CentOS-*
    - 3：更新缓存 ： yum makecache
    - 4：更新 yum : yum update -y
    复制代码

#### 2.2 Java 环境准备 ####

> Yum 版本

// S1 : 查询 Java 支持的版本
    yum search java|grep jdk
    yum search java-1.8.0-openjdk
    
    // S2 : 安装 JDK 
    sudo yum install java-1.8.0-openjdk-devel.x86_64
    
    // S3 : 查询 JDK 安装情况
    java -version
    
    
    复制代码

#### 2.3 Docker 安装 ####

// 查看是否已安装docker列表
    yum list installed | grep docker
    
    // 安装必要的软件包
    sudo yum install -y yum-utils device-mapper-persistent-data lvm2
    
    // 添加 docker 源 (选择合适的源，以下选其一即可，选错可能会 timeout)
    sudo yum-config-manager --add-repo https://download.docker.com/linux/centos/docker-ce.repo
    sudo yum-config-manager --add-repo=http://mirrors.tencent.com/docker-ce/linux/centos/docker-ce.repo
    sudo yum-config-manager --add-repo http://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo 
        
    // 安装docker    
    sudo yum install docker-ce
    
    // 启动docker
    sudo systemctl start docker 
    sudo systemctl enable docker
    sudo systemctl restart docker
    
    // 查看docker服务状态
    systemctl status docker  
    复制代码

#### 2.4 docker compose 安装 ####

// 安装 docker Compose
    sudo curl -L "https://github.com/docker/compose/releases/download/v2.2.2/docker-compose-$(uname -s)-$(uname -m)" -o /usr/local/bin/docker-compose
    
    // 准备处理文件夹
    sudo chmod +x /usr/local/bin/docker-compose
    复制代码

> 但是,众所周知的原因，Github 访问不是很快

// 适用 pip3 进行安装
    pip3 install -U pip setuptools
    pip3 install docker-compose
    
    // 查看 docker compose 版本
    docker-compose --version
    复制代码

#### 2.5 防火墙配置 ####

不是所有的服务器都需要配置这个，腾讯云的默认好像就是关闭的，阿里轻量好像要配置

# 查看firewalld的运行状态
    # 默认防火墙 是关闭的 (not running)
    firewall-cmd --state
    
    # 启动防火墙
    # 没有任何提示 则启动成功
    systemctl start firewalld
    
    # 添加规则 (--permanent 代表重启也生效) 
    # 提示 success 则成功   
    firewall-cmd --permanent --zone=public --add-port=8848/tcp         
    firewall-cmd --permanent --zone=public --add-port=443/tcp    
    firewall-cmd --permanent --zone=public --add-port=3336/tcp   
    firewall-cmd --permanent --zone=public --add-port=5601/tcp   
    firewall-cmd --permanent --zone=public --add-port=8443/tcp   
    
    
    // 查看防火墙规则
       
    
    # 重新加载防火墙配置
    # 提示 success 则成功
    firewall-cmd --reload
    
    # 至此结束
    
    # 查看所有打开的端口
    firewall-cmd --zone=public --list-ports
    firewall-cmd --list-all  
    
    # 关闭防火墙
    systemctl stop firewalld
    复制代码

#### 2.6 其他小组件 ####

// 安装 curl 
    yum install curl
    
    // git 
    yum -y install git
    ssh-keygen -t rsa -C "test123123@qq.com"
    
    复制代码

### 三. 组件安装 ###

#### 3.1 安装 RocketMQ (docker compose) ####

// 1. 进入一个新路径 （我这里适用 home）
    mkdir /home/rocket
    
    // 2. 创建 docker compose
    mkdir rocketmq-docker 
    cd rocketmq-docker 
    touch docker-compose.yml
    
    // 3. 编辑 docker-compose.yml
    version: '3'
    services:
      namesrv:
        image: rocketmqinc/rocketmq:latest
        container_name: rocketmq-namesrv
        command: sh mqnamesrv
        ports:
          - "9876:9876"
        volumes:
          - ./data/namesrv/logs:/root/logs
      broker:
        image: rocketmqinc/rocketmq:latest
        container_name: rocketmq-broker
        command: sh mqbroker -c /rocketmq/broker.conf
        depends_on:
          - namesrv
        ports:
          - "10909:10909"
          - "10911:10911"
          - "10001:10001"
          - "10002:10002"
          - "8080:8080"
        environment:
          NAMESRV_ADDR: namesrv:9876
        volumes:
          - ./data/broker/logs:/root/logs
          - ./broker.conf:/rocketmq/broker.conf
    
    // 4. 创建 broker.conf
    brokerClusterName = DefaultCluster
    brokerName = broker-a
    brokerId = 0
    deleteWhen = 04
    fileReservedTime = 48
    brokerRole = ASYNC_MASTER
    flushDiskType = ASYNC_FLUSH
    listenPort = 10911
    storePathRootDir=/root/store
    storePathCommitLog=/root/store/commitlog
    autoCreateTopicEnable=true
    brokerIP1=10.10.101.80
    
    // 5. 运行 docker 
    docker-compose up -d
    
    
    // 查询整体运行情况
    docker ps
    
    // 发送消息
    
    
    复制代码

> 补充要点 ：

// 以上用的 4.8.0 不一定能下载到，可以查询支持的版本》 去 docker hub 镜像查询
    https://hub.docker.com/r/rocketmqinc/rocketmq/tags
    
    
    // broker.conf 中需要配置你的宿主机IP，否则 nameserver 拿到的会有问题
    
    复制代码

> 安装 docker console

wget https://archive.apache.org/dist/rocketmq/4.8.0/rocketmq-all-4.8.0-bin-release.zip
    unzip rocketmq-all-4.8.0-bin-release.zip
    cd rocketmq-all-4.8.0-bin-release/bin
    
    // 使用 
    sh mqadmin sendMessage -n localhost:9876 -t testTopic -p "Hello, RocketMQ!"
    复制代码

> 安装 RocketMQ Console

// 下载后配置访问地址，别忘了 brokerIP1 里面也要配置地址
    https://github.com/apache/rocketmq-dashboard.git
    
    // 注意添加 入站规则
    TCP:5601,9876,10909,10911,10001,10002 
    复制代码

#### 3.2 安装 Redis ####

// S1 : 安装 Redis
    yum install redis
    
    // S2 : 允许远程访问
    vi /etc/redis.conf
    bind 127.0.0.1  -> 加上 # 注释
    protected-mode yes 改为 protected-mode no 
    
    //  S3 : 启动redis
    service redis start
    
    //------------------------
    //  停止redis
    service redis stop
    //  查看redis运行状态
    service redis status
    //  查看redis进程
    ps -ef | grep redis
    
    
    
    复制代码

#### 3.3 安装 MySQL ####

图方便短期用直接选择 Docker ，长期用慎选，镜像没选好很容易变肉鸡。

// S1 : 拉取镜像
    docker pull mysql
    
    
    // S2 : 运行容器 （密码适当复杂点）
    docker run -d --name antMySQL -e MYSQL_ROOT_PASSWORD=test9786366 -p 3306:3306 mysql
    
    // S3 : 查看运行情况
    docker ps
    docker exec -it antMySQL bash
    
    mysql -uroot -ptest9786366
    
    复制代码

#### 3.4 安装 ES ####

> S1 : 准备 docker-compose.yml

version: '3.2'
    
    services:
      elasticsearch:
        image: docker.elastic.co/elasticsearch/elasticsearch:7.12.0
        container_name: elasticsearch
        environment:
          - 'cluster.name=elasticsearch'
          - 'discovery.type=single-node'
          - 'ES_JAVA_OPTS=-Xms1024m -Xmx1024m'
        volumes:
          - esdata:/usr/share/elasticsearch/data
        ports:
          - '9200:9200'
          - '9300:9300'
        networks:
          - elk
      kibana:
        image: docker.elastic.co/kibana/kibana:7.12.0
        container_name: kibana
        volumes:
          - /etc/localtime:/etc/localtime
          - /home/es/kibana.yml:/usr/share/kibana/config/kibana.yml
        links:
          - elasticsearch:es
        environment:
          - ELASTICSEARCH_URL=http://81.22.11.111:9200
          - 'elasticsearch.hosts=http://es:9200'
          - I18N_LOCALE=zh-CN
        ports:
          - '5601:5601'
        networks:
          - elk
        depends_on:
          - elasticsearch
    networks:
      elk:
        name: elk
        driver:
            bridge
    volumes:
      esdata:
        driver: local
    
    复制代码

> S2 : 准备 kibana.yml

# Default Kibana configuration for docker target
    server.host: '0.0.0.0'
    elasticsearch.hosts: ['http://11.22.33.111:9200']
    monitoring.ui.container.elasticsearch.enabled: true
    复制代码

> S3 : 启动

**docker-compose --compatibility up -d**

// 这里我是简化版，没用 logstash，想要还可以选择加上更多的配置项
    https://blog.51cto.com/u_14129797/5694302
    
    复制代码

#### 3.5 安装 Nacos ####

这里还是使用 docker 安装，包含各种监控插件 @[参考地址][Link 1]

// S1 : 准备安装目录
    mkdir nacos-docker 
    cd nacos-docker 
    touch docker-compose.yml
    
    // S2 : 配置 docker-compose
    
    复制代码

找了很多案例，这一个应该是最完整的，提供了 prometheus 和 grafana. 不过里面有些东西已经找不到了，这里补充下 ：

@ [docker-compose部署nacos单机版(简洁优化版) - JavaPro - 博客园 (cnblogs.com)][Link 1]

version: '3'
    services:
      nacos:
        image: nacos/nacos-server:2.0.4
        container_name: nacos
        restart: always
        environment:
          PREFER_HOST_MODE: hostname #如果支持主机名可以使用hostname,否则使用ip，默认也是ip
          SPRING_DATASOURCE_PLATFORM: mysql #数据源平台 仅支持mysql或不保存empty
          MODE: standalone
          MYSQL_SERVICE_HOST: 127.0.0.1
          MYSQL_SERVICE_DB_NAME: nacos
          MYSQL_SERVICE_PORT: 3306
          MYSQL_SERVICE_USER: root
          MYSQL_SERVICE_PASSWORD: root
          NACOS_APPLICATION_PORT: 8848
          JVM_XMS: 512m
          JVM_MMS: 320m
        volumes:
          - ./docker/nacos/standalone-logs/:/home/nacos/logs
          - ./docker/nacos/plugins/:/home/nacos/plugins
          - ./docker/nacos/conf/application.properties:/home/nacos-docker/application.properties
        ports:
          - "8848:8848"
      prometheus:
        container_name: prometheus
        image: prom/prometheus:latest
        volumes:
          - ./docker/nacos/prometheus/prometheus-standalone.yaml:/etc/prometheus/prometheus.yml
        ports:
          - "9090:9090"
        depends_on:
          - nacos
        restart: on-failure
      grafana:
        container_name: grafana
        image: grafana/grafana:latest
        ports:
          - 3000:3000
        restart: on-failure
    复制代码

*  这里还可以编排mysql进去,已经有数据库了，这里就不要了
 *  **不需要 prometheus 和 grafana 只取 nacos 即可**
 *  application.properties 我给的空的

> prometheus-standalone.yaml

global:
      scrape_interval:     15s #拉取 targets 的默认时间间隔
      #scrape_timeout: 10s #拉取一个 target 的超时时间。
      evaluation_interval: 15s #执行 rules 的时间间隔。
      #external_labels: #额外的属性，会添加到拉取的数据并存到数据库中。
    
    # Alertmanager configuration
    alerting:
      alertmanagers:
        - static_configs:
            - targets:
              # - alertmanager:9093
    
    rule_files:
    # - "first_rules.yml"
    # - "second_rules.yml"
    
    # A scrape configuration containing exactly one endpoint to scrape:
    # Here it's Prometheus itself.
    scrape_configs:
      # The job name is added as a label `job=<job_name>` to any timeseries scraped from this config.
      - job_name: 'prometheus'
        scheme: http
        # metrics_path defaults to '/metrics'
        # scheme defaults to 'http'.
        static_configs: #因为使用了网桥所以targets可以直接使用容器名而不用ip
          - targets: ['prometheus:9090']
    
      - job_name: 'nacos'
        metrics_path: '/nacos/monitor/prometheus'
        static_configs:
          - targets: ['nacos:8848']
    复制代码

除了 2.0.4 还有很多其他的版本 [nacos/nacos-server Tags | Docker Hub][nacos_nacos-server Tags _ Docker Hub] ， 这里我对这个版本比较熟悉

// S3 : 启动容器
    docker-compose --compatibility up -d
    
    // S4 : 查看结果
    docker-compose ps
    docker-compose stop
    复制代码

### 补充 ###

#### docker compose 命令 ####

docker-compose up: 启动应用程序（如果不存在，则构建并启动它）
    docker-compose down: 停止并删除应用程序的容器
    docker-compose ps: 显示当前正在运行的应用程序的容器状态
    docker-compose logs: 显示应用程序的容器日志
    docker-compose build: 构建应用程序的镜像
    docker-compose restart: 重启应用程序的容器
    docker-compose exec: 在容器中执行命令
    docker-compose stop: 停止应用程序的容器
    docker-compose rm: 删除已停止的应用程序的容器
    复制代码

#### docker 常用命令 ####

// 查找镜像
    docker search nacos
    复制代码

### 总结 ###

基本上常用的就在这里了，其他的以后碰到了再补充进去.

**其他比较复杂的就是 jenkins ，K8S 这些，安装可能就不是走 yum了，会稍微复杂一些。有时间单章来发**

[Link 1]: https://link.juejin.cn/?target=https%3A%2F%2Fwww.cnblogs.com%2Fcvandy%2Fp%2F13375527.html
[nacos_nacos-server Tags _ Docker Hub]: https://link.juejin.cn/?target=https%3A%2F%2Fhub.docker.com%2Fr%2Fnacos%2Fnacos-server%2Ftags%3Fpage%3D1%26name%3D2.0.4