Mysql表到多大数据量才开始分库分表？垂直切分/水平切分

淩亂°似流年 2021-09-25 04:40 512阅读 0赞

关系型数据库本身比较容易成为系统瓶颈，单机存储容量、连接数、处理能力都有限。**当单表的数据量达到 1000W 或 100G 以后**，由于查询维度较多，即使添加从库、优化索引，做很多操作时性能仍下降严重。此时就要考虑对其进行切分了，切分的目的就在于减少数据库的负担，缩短查询时间。

数据库分布式核心内容无非就是数据切分 (Sharding)，以及切分后对数据的定位、整合。数据切分就是将数据分散存储到多个数据库中，使得单一数据库中的数据量变小，通过扩充主机的数量缓解单一数据库的性能问题，从而达到提升数据库操作性能的目的。

数据切分根据其切分类型，可以分为两种方式：垂直 (纵向) 切分和水平 (横向) 切分。

## 垂直切分 ##

按照功能划分，把数据分别放到不同的数据库和服务器。

当一个网站开始刚刚创建时，可能只是考虑一天只有几十或者几百个人访问，数据库可能就个db，所有表都放一起，一台普通的服务器可能就够了，而且开发人员也非常高兴，而且信心十足，因为所有的表都在一个库中，这样查询语句就可以随便关联了，多美的一件事情。但是随着访问压力的增加，读写操作不断增加，数据库的压力绝对越来越大，可能接近极限，这时可能人们想到增加从服务器，做什么集群之类的，可是问题又来了，数据量也快速增长。

这时可以考虑对读写操作进行分离，按照业务把不同的数据放到不同的库中。其实在一个大型而且臃肿的数据库中表和表之间的数据很多是没有关系的，或者更加不需要（join）操作，理论上就应该把他们分别放到不同的服务器。例如用户的收藏夹的数据和博客的数据库就可以放到两个独立的服务器。这个就叫垂直划分（其实叫什么不重要）。  
![这里写图片描述][20160714104806689]

当博客或者收藏夹的数据不断增加后，应该怎么办，这样就引出了另外一个做法，叫水平划分。

##  ##

## 水平切分 ##

则把一个表的数据划分到不同的数据库，两个数据库的表结构一样。怎么划分，应该根据一定的规则，可以根据数据的产生者来做引导，上面的数据是由人产生的，可以根据人的id来划分数据库。然后再根据一定的规则，先获知数据在哪个数据库。

其实很多大型网站都经历了数据库垂直划分和水平的划分的阶段。其实这个可以根据经验来确定，不一定由某些硬性的规则。

以刚才的博客为例，数据可以根据userid的奇偶来确定数据的划分。把id为基数的放到A库，为偶数的放B库。

![这里写图片描述][20160714104850299]

这样通过userId就可以知道用户的博客的数据在哪个数据库。其实可以根据userId%10来处理。还可以根据著名的Hash算法来处理。

当初看手机之家的架构是发现他们是：  
水平切分：对数据进行水平分割。

转自

https://blog.csdn.net/weixin\_36358217/article/details/112148821

[https://blog.csdn.net/xingjing1226/article/details/51907220][https_blog.csdn.net_xingjing1226_article_details_51907220]

![watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA5LqM5Y2B5YWt55S755Sf55qE5Y2a5a6i_size_20_color_FFFFFF_t_70_g_se_x_16][]

[20160714104806689]: /images/20210923/0ee6134aa93f476a92b787985950baba.png
[20160714104850299]: /images/20210923/0fe495ae9bef4bd4abccc0e15cda1ae8.png
[https_blog.csdn.net_xingjing1226_article_details_51907220]: https://blog.csdn.net/xingjing1226/article/details/51907220
[watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA5LqM5Y2B5YWt55S755Sf55qE5Y2a5a6i_size_20_color_FFFFFF_t_70_g_se_x_16]: /images/20210923/3c0773b3e81443caa0675357896f8e26.png