mysql分库分表怎么实现_mysql水平分表方案

mysql分库分表怎么实现_mysql水平分表方案这个数值依据: 这个数值与MySQL 的配置以及机器的硬件有关。因为,MySQL 为了提高性能,会将表的索引装载到内存中。InnoDB buffer size 足够的情况下,其能完成全加载进内存,查询

mysql分库分表

mysql分库分表怎么实现_mysql水平分表方案

一、垂直拆分

1、垂直分库:在分布式系统开发中,基本都是按照模块划分,每个业务模块建立一个数据库

mysql分库分表怎么实现_mysql水平分表方案

 特点:业务区分度高,方便维护管理;各个模块独立维护,可以分摊系统的维护成本,提高可用性。

 2、垂直分表:单张宽表,根据实际业务场景,可以拆分为多个子表。

mysql分库分表怎么实现_mysql水平分表方案

垂直拆分的缺点:

1、阿里巴巴《Java 开发手册》提出单表行数超过 500 万行或者单表容量超过 2GB,会影响性能。

这个数值依据: 这个数值与MySQL 的配置以及机器的硬件有关。因为,MySQL 为了提高性能,会将表的索引装载到内存中。InnoDB buffer size 足够的情况下,其能完成全加载进内存,查询不会有问题。但是,当单表数据库到达某个量级的上限时,导致内存无法存储其索引,使得之后的 SQL 查询会产生磁盘 IO,从而导致性能下降。当然,这个还有具体的表结构的设计有关,最终导致的问题都是内存限制。这里,增加硬件配置,可能会带来立竿见影的性能提升哈。

2、根据模块分库(分布式事务问题):当系统之间交互操作数据库时无法完成事务问题,增加了开发的复杂度。

3、关联数据问题:如果需要一个综合数据,需要通过接口聚合各个模块的数据

二、水平拆分

水平拆分的核心:

  • 数据均衡分配
  • 数据查询尽可能在一张表,一个库中

1、水平分库

mysql分库分表怎么实现_mysql水平分表方案

特点:两个子库的数据结构完全一样 

优点:分库后,系统的可用性较高;每个库、每个表的数据量减少了,性能较高

2、水平分表

mysql分库分表怎么实现_mysql水平分表方案

 

特点:两个子表的数据结构完全一致。

优点:每个表中的数据量减少了,缓解数据操作的压力

水平拆分优点:

  • 分摊数据的存储、查询压力
  • 由于拆分后的数据结构与之前一样,所以对于应用层来说,不用做较大的改动

水平拆分缺点

  • 拆分规则如何制定
  • 数据的路由算法,如果后续加表、加库,是否需要重新处理老数据。

三、分库分表带来的问题

1、分布式ID,需要设计

2、分布式事务问题

3、跨库跨表查询问题:

JDBC连接层:sharding-jdb

proxy代理模式:mycat、mysql-proxy

 

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 举报,一经查实,本站将立刻删除。
转载请注明出处: https://daima100.com/6180.html

(0)
上一篇 2023-04-15
下一篇 2023-04-15

相关推荐

  • 大数据量分页查询优化_echarts异步加载数据

    大数据量分页查询优化_echarts异步加载数据摘要:随着offset的增加,查询的时长也会越来越长。当offset达到百万级别的时候查询时长通常是业务所不能容忍的。 本文分享自华为云社区《offset新探索:双管齐下,加速大数据量查询》,作者:

    2023-06-12
    144
  • 用Python将数据可视化的5种方式

    用Python将数据可视化的5种方式在现代社会,数据是几乎所有行业的必要组成部分。然而,这些数据只有在可视化之后才能更好地展现其内在的规律和趋势。而Python语言作为一种多才多艺的工具,被广泛应用于数据可视化方面。

    2024-07-30
    36
  • Oracle 10G RAC 主机意外重启引起分布式事务故障处理[亲测有效]

    Oracle 10G RAC 主机意外重启引起分布式事务故障处理[亲测有效]
    故障:Oracle 10G rac 中的一台主机意外重启,重启后数据库手工启动,从状态上看一切正常,plsql也能登陆,但前端Tuxedo无法连报报错,但T…

    2023-04-08
    145
  • python编写盲注自动化脚本(用python写自动化脚本)

    python编写盲注自动化脚本(用python写自动化脚本)首先你需要在北鲲云超算上申请python这款软件,然后选择配置后就可以直接开始作业了,运行软件后就可以开始搭建脚本界面,编写脚本代码,用超算跑作业很方便,直接线上就可以使用,不需要下载到本地,而且计算效率非常的高。

    2023-10-28
    151
  • Python编程技巧:如何高效的切割字符串?

    Python编程技巧:如何高效的切割字符串?在Python开发中,处理字符串是非常常见的一个问题。字符串的切割是其中比较常见和重要的一个操作,正确高效的切割字符串不仅能提高代码的性能,还能增加代码的可读性。因此,在这篇文章中,我们将为大家介绍如何在Python中高效的切割字符串。我们将从多个方面对这个问题进行详细的阐述。

    2024-04-12
    70
  • 数据库死锁分析(行锁、间隙锁)[亲测有效]

    数据库死锁分析(行锁、间隙锁)[亲测有效]分享遇到过的一种间隙锁导致的死锁案例。文后有总结知识供参考 日志出现:Deadlock found when trying to get lock; try restarting transactio

    2023-05-09
    135
  • Python修改全局变量实现标题

    Python修改全局变量实现标题为了使网页更美观和易于阅读,网页设计的风格越来越趋向于简洁和直接。其中,在网页的标签中使用标题标签是很重要的。但是,如果有很多标题需要处理时,手动添加标题标签就会非常繁琐。因此,使用Python程序自动生成标题标签是一种高效的方法。

    2024-09-20
    16
  • 优雅地处理三角函数 —— python中sin(a)函数的应用

    优雅地处理三角函数 —— python中sin(a)函数的应用在三角函数中,sin(a)函数是最常见的一种函数,它用于计算一个角的正弦值。sin(a)函数的值域是[-1,1],输入角度a的单位是弧度。python中自带sin(a)函数,通过调用math库可以使用sin(a)函数进行计算。

    2024-02-16
    154

发表回复

您的电子邮箱地址不会被公开。 必填项已用*标注