MySQL分库分表的方式有哪些

一、为什么要分库分表

如果一个网站业务快速发展,那这个网站流量也会增加,数据的压力也会随之而来,比如电商系统来说双十一大促对订单数据压力很大,tps十几万并发量,如果传统的架构(一主多从),主库容量肯定无法满足这么高的tps,业务越来越大,单表数据超出了数据库支持的容量,持久化磁盘io,传统的数据库性能瓶颈,产品经理业务·必须做,改变程序,数据库刀子切分优化。由于数据库连接数不足并且表中的数据量庞大,即使进行了优化,查询性能仍然较低,因此需要进行分割。

二、什么是分库分表

分库分表方案是对关系型数据库数据存储和访问机制的一种补充。

分库:将一个库的数据拆分到多个相同的库中,访问的时候访问一个库

分表:把一个表的数据放到多个表中,操作对应的某个表就行

三、分库分表的几种方式

MySQL分库分表的方式有哪些

1.垂直拆分

(1) 数据库垂直拆分

MySQL分库分表的方式有哪些

根据业务拆分,如图,电商系统,拆分成订单库,会员库,商品库

(2)表垂直拆分

MySQL分库分表的方式有哪些

根据业务去拆分表,如图,把user表拆分成user_base表和user_info表,use_base负责存储登录,user_info负责存储基本用户信息

垂直拆分特点:

每个库(表)的结构都不一样

每个库(表)的数据至少一列一样

每个库(表)的并集是全量数据

垂直拆分优缺点

优点:

拆分后业务清晰(专库专用按业务拆分)

数据维护简单,按业务不同,业务放到不同机器上

缺点:

如果单表的数据量,写读压力大

受某种业务决定,或者被限制,也就是说一个业务往往会影响到数据库的瓶颈(性能问题,如双十一抢购)

部分业务无法关联join,只能通过java程序接口去调用,提高了开发复杂度

2. 水平拆分

(1) 数据库水平拆分

MySQL分库分表的方式有哪些

如图,按会员库拆分,拆分成会员1库,会员2库,以userId拆分,userId尾号0-5为1库 6-9为2库,还有其他方式,进行取模,偶数放到1库,奇数放到2库

(2) 表水平拆分

MySQL分库分表的方式有哪些

如图把users表拆分成users1表和users2表,以userId拆分,进行取模,偶数放到users1表,奇数放到users2表

水平拆分的其他方式:

range来分,每个库一段连续的数据,这个一般是按比如时间范围来的,但是这种一般较少用,因为很容易产生热点问题,大量的流量都打在最新的数据上了,优点:扩容的时候,就很容易,因为你只要预备好,给每个月都准备一个库就可以了,到了一个新的月份的时候,自然而然,就会写新的库了 缺点:大部分的 请求,都是访问最新的数据。实际生产用range,要看场景,你的用户不是仅仅访问最新的数据,而是均匀的访问现在的数据以及历史的数据

hash分发,优点:可以平均分配每个库的数据量和请求压力 缺点:扩容起来比较麻烦,会有一个数据迁移的这么一个过程

(3) 水平拆分特点

每个库(表)的结构都一样

每个库(表)的数据都不一样

每个库(表)的并集是全量数据

(4) 水平拆分优缺点

优点:

单库/单表的数据保持在一定量(减少),有助于性能提高

提高了系统的稳定性和负载能力

拆分表的结构相同,程序改造较少。

缺点:

数据的扩容很有难度维护量大

拆分规则很难抽象出来

分片事务的一致性问题部分业务无法关联join,只能通过java程序接口去调用

四、分库分表带来的问题

分布式事务

跨库join查询

分布式全局唯一id

开发成本 对程序员要求高

五、分库分表技术如何选型

(1) 分库分表的开源框架

jdbc 直连层:shardingsphere、tddl

proxy 代理层:mycat,mysql-proxy(360)

jdbc直连层

MySQL分库分表的方式有哪些

jdbc直连层又叫jdbc应用层,是因为所有分片规则,所有分片逻辑,包括处理分布式事务 所有这些问题它都是在应用层,所有项目都是由war包构成的,所有分片都写成了jar包,放到了war包里面,java需要虚拟机去运行的,虚拟机运行的时候就会把war包里面的字节文件进行classLoder加载到jvm内存中,所有分片逻辑都是基于内存方进行操作的

(2) proxy代理层

MySQL分库分表的方式有哪些

如图,proxy代理层,所有分片规则,所有分片逻辑,包括处理分布式事务都在mycat写好了,所有分片逻辑都是基于mycat方进行操作

(3) jdbc直连层和proxy代理层优缺点

jdbc直连层性能高,只支持java语言,支持跨数据库

proxy代理层开发成本低,支持跨语言,不支持跨数据库

以上就是MySQL分库分表的方式有哪些的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/148050.html

赞 (0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
关于MySQL中存储的全角字符以及半角字符的区别详解
上一篇 2025年12月2日 18:37:32
固定宽度卡片如何自动换行并添加过渡效果?
下一篇 2025年12月2日 18:37:36

相关推荐

  • sublime怎么配置react开发环境_Sublime搭建React.js开发环境全攻略

    sublime怎么配置react开发环境_Sublime搭建React.js开发环境全攻略sublime怎么配置react开发环境_Sublime搭建React.js开发环境全攻略sublime怎么配置react开发环境_Sublime搭建React.js开发环境全攻略sublime怎么配置react开发环境_Sublime搭建React.js开发环境全攻略

    答案是配置Babel语法高亮、ESLint代码检查和Prettier自动格式化。首先安装Package Control以管理插件,接着安装Babel插件并设置JavaScript (Babel)为默认语法;然后通过Node.js安装ESLint并配置SublimeLinter-eslint进行实时错…

    2026年9月28日 • 用户投稿
    100
  • JavaFX 嵌套控制器为空问题的解决与最佳实践

    JavaFX 嵌套控制器为空问题的解决与最佳实践JavaFX 嵌套控制器为空问题的解决与最佳实践JavaFX 嵌套控制器为空问题的解决与最佳实践JavaFX 嵌套控制器为空问题的解决与最佳实践

    本文旨在解决 JavaFX 开发中嵌套控制器为空 (null) 的问题,并提供最佳实践指导。通过分析 FXML 文件中的 fx:id 与控制器类中对应字段的命名规则,详细阐述了如何正确地注入嵌套控制器,避免常见的错误配置。同时,强调了遵循标准 Java 命名规范的重要性,以提高代码的可读性和可维护性…

    2026年9月28日 • 用户投稿
    000
  • 如何实现MySQL中插入多行数据的语句?

    如何实现MySQL中插入多行数据的语句?如何实现MySQL中插入多行数据的语句?如何实现MySQL中插入多行数据的语句?如何实现MySQL中插入多行数据的语句?

    如何实现MySQL中插入多行数据的语句? 在MySQL中,有时我们需要一次性插入多行数据到表中,这时我们可以使用INSERT INTO语句来实现。下面将介绍如何使用INSERT INTO语句来插入多行数据,并给出具体的代码示例。 假设我们有一个名为students的表,包含id、name和age字段…

    2026年9月28日 • 用户投稿
    000
  • firefox浏览器为什么打不开某些网站 Firefox浏览器特定网站访问失败排查方案

    firefox浏览器为什么打不开某些网站 Firefox浏览器特定网站访问失败排查方案firefox浏览器为什么打不开某些网站 Firefox浏览器特定网站访问失败排查方案firefox浏览器为什么打不开某些网站 Firefox浏览器特定网站访问失败排查方案firefox浏览器为什么打不开某些网站 Firefox浏览器特定网站访问失败排查方案

    清除缓存和Cookie;2. 确保JavaScript启用;3. 禁用硬件加速;4. 刷新Firefox;5. 修改DNS为8.8.8.8/8.8.4.4,可解决Firefox无法加载网页问题。 如果您尝试访问某个网站,但Firefox浏览器无法加载页面或显示异常,则可能是由于网络设置、浏览器配置或…

    2026年9月28日 • 用户投稿
    000
  • 如何使用SQL语句在MySQL中进行数据连接和联合查询?

    如何使用SQL语句在MySQL中进行数据连接和联合查询?如何使用SQL语句在MySQL中进行数据连接和联合查询?如何使用SQL语句在MySQL中进行数据连接和联合查询?如何使用SQL语句在MySQL中进行数据连接和联合查询?

    如何使用SQL语句在MySQL中进行数据连接和联合查询? 数据连接和联合查询是 SQL 语言中常用的技巧,能够在多个表中获取和筛选所需的数据。在 MySQL 中,我们可以通过使用 JOIN 子句来实现数据连接,使用 UNION 和 UNION ALL 子句来实现数据的联合查询。接下来,我们将详细介绍…

    2026年9月28日 • 用户投稿
    100
  • Ollama 上线 “Web search” API,为 LLM 集成实时网络搜索能力

    Ollama 上线 “Web search” API,为 LLM 集成实时网络搜索能力Ollama 上线 “Web search” API,为 LLM 集成实时网络搜索能力Ollama 上线 “Web search” API,为 LLM 集成实时网络搜索能力Ollama 上线 “Web search” API,为 LLM 集成实时网络搜索能力

    ollama 正式发布“web search”api,使大语言模型具备实时获取互联网信息的能力,显著提升回答准确率并有效降低幻觉现象。 该功能以 REST API 形式开放,并已深度集成至 Ollama 的 Python 和 JavaScript SDK 中,便于开发者在各类应用中快速接入与调用。同…

    2026年9月28日 • 用户投稿
    100
  • 如何使用SQL语句在MySQL中进行数据权限和用户管理?

    如何使用SQL语句在MySQL中进行数据权限和用户管理?如何使用SQL语句在MySQL中进行数据权限和用户管理?如何使用SQL语句在MySQL中进行数据权限和用户管理?如何使用SQL语句在MySQL中进行数据权限和用户管理?

    如何使用SQL语句在MySQL中进行数据权限和用户管理? 引言:数据权限和用户管理是数据库管理中非常重要的环节。在MySQL数据库中,通过SQL语句可以方便地进行数据权限的控制和用户管理。本文将详细介绍如何使用SQL语句在MySQL中进行数据库权限和用户管理。 一、数据权限管理 创建用户并授权在My…

    2026年9月28日 • 用户投稿
    100
  • Java并发编程:掌握Future、线程安全与原子操作

    Java并发编程:掌握Future、线程安全与原子操作Java并发编程:掌握Future、线程安全与原子操作Java并发编程:掌握Future、线程安全与原子操作Java并发编程:掌握Future、线程安全与原子操作

    本教程深入探讨在Java并发编程中,如何避免将Future对象错误地用于存储可变数据,并详细指导如何正确地管理ExecutorService生命周期以及利用AtomicIntegerArray等并发工具实现线程安全的共享数组元素更新,确保数据一致性。 1. 理解Future的本质与误用 在java并…

    2026年9月28日 • 用户投稿
    100
  • 如何使用SQL语句在MySQL中进行数据备份和恢复?

    如何使用SQL语句在MySQL中进行数据备份和恢复?如何使用SQL语句在MySQL中进行数据备份和恢复?如何使用SQL语句在MySQL中进行数据备份和恢复?如何使用SQL语句在MySQL中进行数据备份和恢复?

    如何使用SQL语句在MySQL中进行数据备份和恢复? 在数据库中,数据备份和恢复是非常重要的操作,可以保证数据的安全性并且在遇到意外情况时能够迅速恢复数据。MySQL是一个非常常用的关系型数据库,它提供了多种方式来进行数据备份和恢复,其中一种方式就是使用SQL语句。本文将介绍如何使用SQL语句在My…

    2026年9月28日 • 用户投稿
    200
  • PHP连接MySQL数据库方法

    PHP连接MySQL数据库方法PHP连接MySQL数据库方法PHP连接MySQL数据库方法PHP连接MySQL数据库方法

    php是一种被广泛用于web开发的脚本语言,而mysql则是一个流行的开源关系型数据库系统。将二者结合,可以高效、灵活地搭建动态网站。下面我们将学习如何通过php连接数据库,掌握这一核心技能,为后续的开发工作奠定基础。 1、 在Web服务器的根目录下新建一个PHP文件,例如命名为testMysql.…

    2026年9月28日 • 用户投稿
    100
  • Java封装如何保护对象内部状态

    封装通过私有化字段并提供公共方法控制访问,确保对象状态安全。首先将字段声明为private,防止外部直接访问,增强数据安全性;接着通过getter和setter方法在读写时加入验证逻辑,如检查年龄范围、防止可变对象引用泄露(返回副本或不可修改视图);构造器中同样需校验参数,保证对象初始状态合法;最终…

    2026年9月28日
    100
  • 并发编程中Future对象使用不当及解决方案

    并发编程中Future对象使用不当及解决方案并发编程中Future对象使用不当及解决方案并发编程中Future对象使用不当及解决方案并发编程中Future对象使用不当及解决方案

    本文针对Java并发编程中常见的set<int, Future> is not applicable to arguments (int,int)错误,深入剖析了其产生的原因,即试图将整型值直接赋值给存储Future对象的集合。文章将详细阐述Future对象的特性,并提供正确的解决方案,…

    2026年9月28日 • 用户投稿
    100
  • cPanel修改数据库用户权限

    cPanel修改数据库用户权限cPanel修改数据库用户权限cPanel修改数据库用户权限cPanel修改数据库用户权限

    在虚拟主机环境下,为mysql数据库新建用户后,必须赋予其相应的操作权限,否则该账户将无法对数据库进行有效访问与管理。若权限配置不正确,可能导致网站程序在安装或运行过程中因无法读取或写入数据而报错。本文将逐步说明如何通过cpanel控制面板调整数据库用户的权限,确保其拥有足够的操作权限,保障应用正常…

    2026年9月27日 • 用户投稿
    100
  • 从一副牌中抽取唯一牌的正确方法(Java)

    从一副牌中抽取唯一牌的正确方法(Java)从一副牌中抽取唯一牌的正确方法(Java)从一副牌中抽取唯一牌的正确方法(Java)从一副牌中抽取唯一牌的正确方法(Java)

    本文旨在解决在Java中使用递归函数从一副牌中抽取唯一牌时出现的java.lang.StackOverflowError问题。通过分析错误原因,提供正确的代码示例,并详细解释了如何避免该错误,确保每次抽取的牌都是唯一的。本文将帮助读者理解递归的正确使用方式以及如何优化代码以提高效率。 问题分析 原始…

    2026年9月27日 • 用户投稿
    000
  • 如何优化MySQL数据库中的SQL语句性能?

    如何优化MySQL数据库中的SQL语句性能?如何优化MySQL数据库中的SQL语句性能?如何优化MySQL数据库中的SQL语句性能?如何优化MySQL数据库中的SQL语句性能?

    如何优化MySQL数据库中的SQL语句性能? 概述:MySQL是目前最常用的关系型数据库管理系统之一,它的性能影响着许多应用程序的运行效率。在开发和维护MySQL数据库时,优化SQL语句的性能是至关重要的。本文将介绍一些优化MySQL数据库中SQL语句性能的方法,包括使用索引、优化查询、修改数据类型…

    2026年9月27日 • 用户投稿
    200
  • 如何在mysql中使用索引优化HAVING筛选

    HAVING子句本身不直接使用索引,但通过将过滤条件前移至WHERE、为GROUP BY字段创建索引、使用覆盖索引及避免复杂表达式,可显著提升查询性能。 在MySQL中,HAVING子句用于对分组后的结果进行筛选,常与GROUP BY配合使用。很多人发现HAVING查询变慢,误以为无法使用索引,其实…

    2026年9月27日
    100
  • linux怎么部署web项目

    linux怎么部署web项目linux怎么部署web项目linux怎么部署web项目linux怎么部署web项目

    在 Linux 上部署 Web 项目需要以下步骤:准备环境:安装 Web 服务器(如 Apache 或 Nginx)、PHP、MySQL 等。部署项目:将项目文件复制到 Web 根目录,配置 Web 服务器指向项目目录,并配置 PHP。配置 Web 服务器:对于 Apache 编辑 000-defa…

    2026年9月27日 • 用户投稿
    100
  • sublime怎么配置java语法检查_sublime Java语法检查配置

    sublime怎么配置java语法检查_sublime Java语法检查配置sublime怎么配置java语法检查_sublime Java语法检查配置sublime怎么配置java语法检查_sublime Java语法检查配置sublime怎么配置java语法检查_sublime Java语法检查配置

    首先安装Package Control,再通过它安装SublimeLinter和SublimeLinter-javac插件,确保系统已配置JDK并能全局运行javac,最后在SublimeLinter设置中启用javac,即可实现Java语法检查。 Sublime Text 本身不自带 Java 语…

    2026年9月27日 • 用户投稿
    1000
  • 设置Apache FOP字体相对路径:使用fop.xconf配置跨平台字体

    设置Apache FOP字体相对路径:使用fop.xconf配置跨平台字体设置Apache FOP字体相对路径:使用fop.xconf配置跨平台字体设置Apache FOP字体相对路径:使用fop.xconf配置跨平台字体设置Apache FOP字体相对路径:使用fop.xconf配置跨平台字体

    Apache FOP在不同操作系统下配置字体时,使用绝对路径会遇到兼容性问题。本文详细介绍如何在fop.xconf中利用标签和相对embed-url属性,灵活指定字体文件的相对路径,确保应用程序在多种环境中都能正确加载和渲染字体,避免硬编码路径,提升可移植性。 FOP字体配置的跨平台挑战 在使用ap…

    2026年9月27日 • 用户投稿
    500
  • 就业培训里PHP+MySQL安全开发的讲解深度

    php+mysql安全开发的讲解深度应包括:1)基础安全措施的详细讲解,2)常见攻击类型和防范方法的深入探讨,3)最佳实践和开发习惯的培养,以提升学员的技术技能和安全意识。 在就业培训中,关于PHP+MySQL安全开发的讲解深度是一个非常关键的话题。这不仅关系到学员能否掌握必要的技能,也直接影响到他…

    2026年9月27日
    100

发表回复

登录后才能评论
关注微信