架构系统的雪崩理解

野性酷女 2021-09-20 13:52 255阅读 0赞

**1.背景**

最近遇到了线上服务的雪崩，查查资料，整理整理。

离线架构更多的是考虑数据写入时的，

*  成功率，建库成功率有几个9
 *  吞吐量，上亿数据多久可以完成建库。
 *  数据一致性，机房间、同机房副本间。
 *  延时，单条数据的写入时间分位值。**离线对延时要求可能不严格**。

在线架构更多的是考虑数据读取时的，

*  成功率，后端存储稳定性，是否有热点数据。
 *  qps，系统能支持的并发请求量
 *  一致性，排序、策略等是否一致。
 *  **对时间的延时要求很高**。通常一个请求需要再规定时间内返回。

**2.什么是雪崩**

指分布式系统中经常会出现某个基础服务不可用造成整个系统不可用的情况, 这种现象被称为服务雪崩效应。

离线雪崩时，新数据无法更新，导致队列堵塞。

在线雪崩时，在线无法提供正常的检索服务，从外部看整个系统不可用。

因此，**通常雪崩都是说的在线架构**。

**3. 如何形成的在线雪崩**

离线雪崩时，新数据无法更新，导致队列堵塞。

在线雪崩时，在线无法提供正常的检索服务，从外部看整个系统不可用。

因此，**通常雪崩都是说的在线架构**。

在线请求需要在规定时间内返回结果，通常上游对下游的超时时间会设置稍大一些考虑到下游模块可能需要重试。

下面的图，大致演示了在线架构雪崩，如果底层模块出问题，大量请求为返回，可能导致多个模块对下游的重试，导致最终下游模块由于请求量过大系统不可用。

![466768-20180519090614625-659835206.png][]

导致雪崩的情况可能有：

*  容量不足。(请求量正常增加)
 *  冗余不足。(无法应对高峰、切流量)
 *  热点数据访问，导致后端存储无法及时返回。
 *  代码bug。死循环等。

**4. 如何避免**

大部分都是套路，除了因为代码bug。

大致套路，

*  增加缓存。根据业务需要增加。有些服务必须实时数据就不可加。
 *  增加容量。系统需要有一定冗余度。
 *  定时压测。了解当前系统可接受的最大请求压力。
 *  增加有效的监控报警。
 *  增加降级策略。临近雪崩时，模块自动丢失部分请求；重试次数减少。

参考:

(1) https://segmentfault.com/a/1190000005988895

(2) https://blog.csdn.net/starryninglong/article/details/65628337

转载于:https://www.cnblogs.com/xudong-bupt/p/9039064.html

[466768-20180519090614625-659835206.png]: /images/20210726/0a23e9ddfaa143b58a1c8ff68a8ddfa4.png

发表评论取消回复

表情：

评论列表（有 0 条评论，255人围观）

还没有评论，来说两句吧...

相关阅读

相关如何解决微服务架构中的雪崩问题？

记得在三年前公司因为业务发展需要，就曾经将单体应用迁移到分布式框架上来。当时就遇到了这样一个问题：系统仅有一个控制单元，它会调用多个运算单元，如果某个运算单元（作为服

水深无声/ 2023年07月02日 08:28/ 0 赞/ 87 阅读

相关谈谈对于企业级系统架构的理解

在我们刚开始学习架构的时候，首先会想到分层的概念，分层架构比较经典的是三层架构，那么，什么是三层架构呢？它包括表现层、业务层、数据访问层；而对于一个新手来说，从抽象意义上的三层

墨蓝/ 2023年03月02日 10:49/ 0 赞/ 145 阅读

相关谈谈对于企业级系统架构的理解

在我们刚开始学习架构的时候，首先会想到分层的概念，分层架构比较经典的是三层架构，那么，什么是三层架构呢？它包括表现层、业务层、数据访问层；而对于一个新手来说，从抽象意义上的三层

àì夳堔傛蜴生んèń/ 2022年12月14日 13:46/ 0 赞/ 153 阅读

相关 Spring深入理解-Spring5系统架构

> 导语 > 在之前的分享中我们知道Spring中有很多的模块，大约有20个不同的模块，由一千多个不同的文件构成。这些模块课可以分为核心容器、AOP和设备支持、数据访问

不念不忘少年蓝@/ 2022年10月08日 14:27/ 0 赞/ 193 阅读

相关谈谈对于企业级系统架构的理解

在我们刚开始学习架构的时候，首先会想到分层的概念，分层架构比较经典的是三层架构，那么，什么是三层架构呢？它包括表现层，业务层，数据访问层；而对于一个新手来说，从抽象意义上的三层

淡淡的烟草味﹌/ 2022年09月18日 09:59/ 0 赞/ 187 阅读

相关深入理解HBase的系统架构

HBase的构成 Regions HBase的HMaster ZooKeeper HBase各组成部分之间的合作 HBase的第一次读写

妖狐艹你老母/ 2022年06月14日 01:19/ 0 赞/ 245 阅读

相关深入理解HBase的系统架构

原文链接：https://blog.csdn.net/Yaokai\_AssultMaster/article/details/72877127\hbase%E7%9A%

Myth丶恋晨/ 2022年05月27日 04:19/ 0 赞/ 225 阅读

相关理解分布式系统中的缓存架构(下)

作者陈彩华文章转载交流请联系 caison@aliyun.com 复制代码承接上一篇[《理解分布式系统中的缓存架构(上)》][Link 1]，介

拼搏现实的明天。/ 2022年03月16日 15:50/ 0 赞/ 243 阅读

相关对系统架构的一点理解

架构的演变 \--------------------------------------------------------------------------------

桃扇骨/ 2022年03月14日 14:28/ 0 赞/ 249 阅读

相关架构系统的雪崩理解

1.背景最近遇到了线上服务的雪崩，查查资料，整理整理。离线架构更多的是考虑数据写入时的，成功率，建库成功率有几个9 吞吐量，上亿数据多久可以完成建库。

野性酷女/ 2021年09月20日 13:52/ 0 赞/ 256 阅读