数据库分表策略

「爱情、让人受尽委屈。」 2024-04-18 23:37 80阅读 0赞

### **数据库的分表策略** ###

*  **垂直切分（纵向）**

垂直切分常见的有垂直分库和垂直分表；

**垂直分库：**

就是根据业务的耦合性，将关系度低的不同表存储在不同的数据库。按业务进行独立的划分。

**垂直分表：**

基于数据库中的列进行，某个表字段较多，可以新建一张扩展表，将不经常用或字段长度较大的字段拆分出去到扩展表。当字段很多的情况下，就通过大表拆分小表，便于开发和维护，也避免跨页的问题。MySQL底层是通过数据页存储的，一条记录占用空间过大会导致跨页，造成额外的性能开销。另外数据库以行为单位将数据加载到内存中，这样表中字段长度较短且访问频率较高，内存能加载更多的数据，命中率更高，减少磁盘IO，从而提升数据库的性能。

**垂直切分优点：**

1.  解决业务系统层面的耦合，业务清晰；
2.  可以对不同业务的数据进行分级管理、维护、监控、扩展等；
3.  高并发情景下，垂直切分可以一定程度的提升IO、数据库连接数、单机硬件资源的瓶颈。

**缺点：**

1.  分布式事务处理复杂；
2.  依然存在单表数据量过大的问题（不包含水平切分）；
3.  部分表无法join，只能通过接口聚合方式解决，提升开发的复杂度；

*  **水平切分**

垂直切分之后需要进行水平切分；

水平切分分为库内分表和分库分表；

就是根据表内数据内在的逻辑关系，将同一个表按不同的条件分散到多个数据库或多个表，每个表中包含一部分数据，从而使得单个表数据量变小，达到效果。

库内分表只解决了单一表数据量过大的问题，但没有将表分布到不同机器的库上，因此对于减轻MySQL数据库的整体压力，帮助较小。

**水平切分优点：**

1.  不存在单库数据量过大、高并发的性能瓶颈，提升系统稳定性和负载能力；
2.  应用端改造小，不需要进行业务的拆分；

**缺点：**

1）跨页分片的事务一致性难以保证；

2）跨库的join关联查询性能较差；

3）数据多次扩展难度和维护量极大；

**水平分割规则为：**

1.  按数值范围
2.  根据数值取模；一般采用hash取模mod的切分方式；

**分库分表带来的问题**

1.  事务的一致性问题；实现方法：对数据进行对账检查，基于日志对比，定期同标准数据来源进行同步等等。
2.  跨节点关联查询join问题；解决方法：

全局表：将这类表在每个数据库中都保存一份，很少修改;

字段冗余：空间换时间，通过冗余保存;

数据组装：分两次查询，进行拼装;

ER分片：先确定表之间的关联关系，并将那些存在关联关系的表记录存在同一个分片尚，较好的避免跨分片join问题；

发表评论取消回复

表情：

评论列表（有 0 条评论，80人围观）

还没有评论，来说两句吧...

相关阅读

相关数据库分表策略

**数据库的分表策略** * **垂直切分（纵向）** 垂直切分常见的有垂直分库和垂直分表； **垂直分库：** 就是根据业务的耦合性，将关系度低的不同表存...

「爱情、让人受尽委屈。」/ 2024年04月18日 23:37/ 0 赞/ 81 阅读

相关 MySQL数据库水平分表策略--一致性hash

一致性hash算法缘起一致性哈希[算法][Link 1]在1997年由麻省理工学院提出的一种分布式哈希（DHT）实现算法，设计目标是为了解决因特网中的热点(Hot sp

迷南。/ 2024年02月17日 22:22/ 0 赞/ 12 阅读

相关数据库分库分表策略（转载)

一、分库分表的背景在数据爆炸的年代，单表数据达到千万级别，甚至过亿的量，都是很常见的情景。这时候再对数据库进行操作就是非常吃力的事情了，select个半天都出不来数据，这时

矫情吗；*/ 2023年06月07日 12:29/ 0 赞/ 14 阅读

相关数据库分库分表策略，如何分库，如何分表？

导语：随着线下店业务发展，线下店开店数越来越多，价格系统的数据增长非常快速，部分单表已达到3亿之多，为了适应业务的发展，考虑对价格系统进行分库分表，因此特别了解了一下分库分

今天药忘吃喽~/ 2023年02月17日 08:59/ 0 赞/ 14 阅读

相关分表策略

取模分表例如：对券信息表进行取模分表，分为0~99张表 public static Integer getShrading(String modKey,int s

不念不忘少年蓝@/ 2022年11月04日 00:59/ 0 赞/ 126 阅读

相关 mybatis分表策略shard

分表，通常在数据量大的情况下进行，当然应该先对项目的数据量进行数量级的预估，以根据不同的需求进行采用不同的分表策略。 (shard在mybatis中的配置就不多聊了，直接搜"

Dear 丶/ 2022年06月17日 00:27/ 0 赞/ 254 阅读

相关数据库分库分表系列(一) 拆分实施策略和示例演示

本文原文连接: [http://blog.csdn.net/bluishglc/article/details/7696085][http_blog.csdn.net_blui

向右看齐/ 2022年06月04日 10:00/ 0 赞/ 209 阅读

相关数据库分库分表策略实现方案！

一、MySQL扩展具体的实现方式随着业务规模的不断扩大，需要选择合适的方案去应对数据规模的增长，以应对逐渐增长的访问压力和数据量。关于数据库的扩展主要包括：业务拆分、主

淡淡的烟草味﹌/ 2022年05月12日 10:00/ 0 赞/ 230 阅读

相关数据库分表

文章目录分表思路分表的背景分表的计算分表的存储规则分表的索引值源码查询数据表索

r囧r小猫/ 2022年03月19日 18:47/ 0 赞/ 218 阅读

相关数据库分库分表策略

一、背景：系统刚开始的时候，数据库都是单库单表结构。随着业务量的增加进行第一次数据库升级，根据业务垂直拆分数据库，这样多变成多个业务数据库，每个数据库里面还是单

野性酷女/ 2022年02月28日 07:24/ 0 赞/ 388 阅读