Java面试突击百度网盘

﹏ヽ暗。殇╰゛Y 2022-09-02 03:43 296阅读 0赞

## Redis主从复制 ##

### 概念 ###

Redis的主从复制概念和MySQL的主从复制大概类似。一台`主机master`，一台`从机slaver`。master主机数据更新后根据配置和策略，自动同步到slaver从机，Master以`写为主`，Slave以`读为主`。

![513eca7fb46947b44f310eca4a0fe864.png][]

#### 主要用途 ####

*  `读写分离`：适用于读多写少的应用，增加多个从机，提高读的速度，提高程序并发
 *  `数据容灾恢复`：从机复制主机的数据，相当于数据备份，如果主机数据丢失，那么可以通过从机存储的数据进行恢复。
 *  `高并发、高可用集群实现的基础`：在高并发的场景下，就算主机挂了，从机可以进行`主从切换`，从机自动成为主机对外提供服务。

### 一主多从配置 ###

![83be4cfc926fbb310263e24bcd33d9b8.png][]

#### 环境准备 ####

老哥太穷了，就用一台机器模拟三个机器。

*  `第一步：`将redis.conf复制3份，分别是redis6379.conf、redis6380.conf、redis6381.conf
 *  `第二步：` 修改三个redis.conf文件里的port端口、pid文件名、日志文件名、rdb文件名
 *  `第三步：` 分别打开三个窗口模拟三台服务器，并开启redis服务。

#### 查看当前3台机器主从角色 ####

先用命令`info replication`看看3台机器目前的`角色`是什么。

# 三台机器都是这个状态
    127.0.0.1:6379> info replication
    # 角色是master主机
    role:master
    # 从机个数为0
    connected_slaves:0

#### 设置主从关系 ####

这里注意，我们只设置从机就可以了，不用设置主机。我们选择`6380`和`6381`作为`从机`。`6379`作为`主机`。

# 6380 端口
    127.0.0.1:6380> SLAVEOF 127.0.0.1 6379
    
    # 6381 端口
    127.0.0.1:6381> SLAVEOF 127.0.0.1 6379
    
    # 6381 端口
    127.0.0.1:6381> SLAVEOF 127.0.0.1 6379

#### 再次查看3台机器目前角色 ####

再次执行命令：`info replication`

# 主机
    127.0.0.1:6379> info replication
    role:master # 角色：主机
    connected_slaves:2 #连接的从机个数，以及从机IP和端口
    slave0:ip=127.0.0.1,port=6380,state=online,offset=98,lag=1
    slave1:ip=127.0.0.1,port=6381,state=online,offset=98,lag=1
    
    # 从机1
    127.0.0.1:6380> info replication
    role:slave # 角色：从机
    master_host:127.0.0.1 # 主机的IP和端口
    master_port:6379
    
    # 从机2
    127.0.0.1:6381> info replication
    role:slave # 角色：从机
    master_host:127.0.0.1 # 主机的IP和端口
    master_port:6379

#### 搭建成功，试验一把 ####

*  `全量复制：` 从机会把主机之前的数据全部都同步过来，大家可以在从机上get 某key试试。
 *  `增量复制：` 当主机新增数据时，从机会将该新增数据同步过来，大家可以在主机上执行命令set key value，然后在从机上get 该key，看是否能获取到。

#### 读写分离 ####

Redis的从机`默认`不允许进行`写操作`，大家可以在从机上执行命令`set key value`，会报错。

# 6380从机
    127.0.0.1:6380> set k3 v3
    (error) READONLY You can't write against a read only slave.

**「呼，好累」**，主从复制写的差不多了！！

### 主从复制原理 ###

![0c968ef9229e3db2617856e45a3890e8.png][]

#### 全量复制 ####

![5afa5efe16fdd767fd8de2bb2ed46c8a.png][]

\*\*「①」\*\*slave发送psync，由于是第一次复制，不知道master的runid，自然也不知道offset，所以发送psync ？ -1

\*\*「②」\*\*master收到请求，发送master的runid和offset给从节点。

\*\*「③」\*\*从节点slave保存master的信息

\*\*「④」\*\*主节点bgsave保存rdb文件

\*\*「⑤」\*\*主机点发送rdb文件

并且在\*\*「④」**和**「⑤」\*\*的这个过程中产生的数据，会写到复制缓冲区repl\_back\_buffer之中去。

\*\*「⑥」\*\*主节点发送上面两个步骤产生的buffer到从节点slave

\*\*「⑦」\*\*从节点清空原来的数据，如果它之前有数据，那么久会清空数据

\*\*「⑧」\*\*从节点slave把rdb文件的数据装载进自身。

#### 全量复制的开销 ####

\*\*「①」\*\*bgsave时间

\*\*「②」\*\*rdb文件网络传输时间

\*\*「③」\*\*从节点清空数据的

\*\*「④」\*\*从节点加载rdb的时间

\*\*「⑤」\*\*可能的aof重写时间，这是针对从节点，例如开启了aof之后，从节点添加buffer数据时候，可能需要aof重写

基于上面的原因，有的情况下不适合使用全量复制，例如网络抖动之后，从节点只需要传送一部分数据，不需要传送全部数据，`redis2.8`之后实现了部分复制功能

#### 部分复制 ####

![373fef83792c88751756a238c6865b1a.png][]

\*\*「①」\*\*假设发送网络抖动或者别的情况，暂时失去了连接

\*\*「②」\*\*这个时候，master还在继续往buffer里面写数据

\*\*「③」\*\*slave重新连接上了master

\*\*「④」\*\*slave向master发送自己的offset和runid

\*\*「⑤」\*\*master判断slave的offset是否在buffer的队列里面，如果是，那就返回continue给slave，否则需要进行全量复制（因为这说明已经错过了很多数据了）

\*\*「⑥」\*\*master发送从slave的offset开始到缓冲区队列结尾的数据给slave  
![274d2c6089ed9d4c0d7beccdf487b01a.png][]

# Docker步步实践 #

**目录文档：**

![e1de33a338b2f8efe1233675d3bbd14a.png][]

![c88293845a058462dcc3c59be326da90.png][]

**①Docker简介**

**②基本概念**

**③安装Docker**

![303cf66d3675f3f1b282b0297c9b04ed.png][]

**④使用镜像：**

![5d6d6b1ca9a5b802c29ca83f0c745ed1.png][]

**⑤操作容器：**

![5f61f2412a50deb5994fd58689ab85be.png][]

**⑥访问仓库：**

![d4dfeafb06c9f7e0a071b26831780e23.png][]

**⑦数据管理：**

![cd768c26a662e941cf9948e4a6526cec.png][]

**⑧使用网络：**

![871fdfa05f1e39e87c2e694818fd87fc.png][]

**⑨高级网络配置：**

![63e03ac77c40cec3a155e2e2ad961b3e.png][]

**⑩安全：**

![904b2387c2c3239bbdbf433e5cdbaae6.png][]

**⑪底层实现：**

![9063e0732e3acffa8d523d1af103a2ec.png][]

**⑫其他项目：**

![acf5868db1148bc05930ae3a8b9deed2.png][]

\[外链图片转存中…(img-YoYEZpe4-1627549781260)\]

**⑩安全：**

\[外链图片转存中…(img-d7QJtaaD-1627549781261)\]

**⑪底层实现：**

\[外链图片转存中…(img-bc0tWt8j-1627549781261)\]

**⑫其他项目：**

\[外链图片转存中…(img-3DfMcs06-1627549781262)\]

**有需要完整版源码+笔记的朋友[点击这里免费获取][Link 1]**

[513eca7fb46947b44f310eca4a0fe864.png]: /images/20220829/9cdbf516b57d414fad68ad369fef5ea0.png
[83be4cfc926fbb310263e24bcd33d9b8.png]: /images/20220829/1a7e6f20b0924b10bfbdc60793f21434.png
[0c968ef9229e3db2617856e45a3890e8.png]: /images/20220829/61ac8424843c4db2bbf4a60c3e006322.png
[5afa5efe16fdd767fd8de2bb2ed46c8a.png]: /images/20220829/f2b890e603e446508a3aef5698ffbd28.png
[373fef83792c88751756a238c6865b1a.png]: /images/20220829/ba0dee2610594882bcd454c16265fb21.png
[274d2c6089ed9d4c0d7beccdf487b01a.png]: /images/20220829/d66316ac073943199fae26fdac28feb8.png
[e1de33a338b2f8efe1233675d3bbd14a.png]: /images/20220829/5e29c595269649c6bcaa8f31260ef1c4.png
[c88293845a058462dcc3c59be326da90.png]: /images/20220829/e08d239e2cc6496eb6f96b572133708f.png
[303cf66d3675f3f1b282b0297c9b04ed.png]: /images/20220829/0c1008d263244291aad2981da3a08d8a.png
[5d6d6b1ca9a5b802c29ca83f0c745ed1.png]: /images/20220829/a4f3ca48402f4aa1b697c25685feacaf.png
[5f61f2412a50deb5994fd58689ab85be.png]: /images/20220829/8e9c90f4e27c49b7890e1374a72c3219.png
[d4dfeafb06c9f7e0a071b26831780e23.png]: /images/20220829/16fb5b66014d438da5ee9214db169c8b.png
[cd768c26a662e941cf9948e4a6526cec.png]: /images/20220829/2dbef15640194a0080a8ef04632c46a6.png
[871fdfa05f1e39e87c2e694818fd87fc.png]: /images/20220829/4959ac6ad02c4e4a979dba2c02c85e19.png
[63e03ac77c40cec3a155e2e2ad961b3e.png]: /images/20220829/274a2f42dd3149b2a299cb5c801ad1c8.png
[904b2387c2c3239bbdbf433e5cdbaae6.png]: /images/20220829/400d11d4e5564d999fbe10950b2d6fa0.png
[9063e0732e3acffa8d523d1af103a2ec.png]: /images/20220829/92cf6d65bf694decb2630d36a535cf40.png
[acf5868db1148bc05930ae3a8b9deed2.png]: /images/20220829/aa59a420753e41908ee9a23c43767332.png
[Link 1]: https://gitee.com/vip204888/java-p7