讲师中心 微信公众号
首页
文章
后端开发 web前端 数据库 开发工具 php框架 常见问题 科技 Java 系统教程 电脑教程 硬件教程 手机教程 软件教程 游戏教程 自媒体 新闻
专题
后端开发 web前端 数据库 开发工具 php框架 科技 Java 系统教程 电脑教程 硬件教程 手机教程 软件教程 游戏教程 新闻
AI工具
AI 聊天问答 Agent智能体 AI 文本写作 AI 绘画作图 AI 设计工具 AI 视频创作 AI 音频制作 AI 办公学习 AI 编程开发 Prompt指令
学习
大前端 后端开发 数据库 移动端 运维开发 计算机基础
编程手册
大前端 后端开发 数据库 移动端 运维开发 计算机基础
下载
js特效 网站源码 工具下载 类库下载 网站素材 学习资源 插件扩展 手机游戏
最近更新
当前位置：首页 > 数据库 > mysql教程 >

正文

0

0

MySQL分库分表实例分析

PHPz

PHPz

发布时间：2023-06-03 18:34:30

|

1221人浏览过

|

来源于亿速云

转载

    一、为什么要分库分表

    数据库架构演变

    刚开始多数项目用单机数据库就够了，随着服务器流量越来越大，面对的请求也越来越多，我们做了数据库读写分离， 使用多个从库副本（Slave）负责读，使用主库（Master）负责写，master和slave通过主从复制实现数据同步更新，保持数据一致。slave 从库可以水平扩展，所以更多的读请求不成问题

    但是当用户量级上升，写请求越来越多，怎么保证数据库的负载足够？增加一个Master是不能解决问题的， 因为数据要保存一致性，写操作需要2个master之间同步，相当于是重复了，而且架构设计更加复杂

    这时需要用到分库分表（sharding），把库和表存放在不同的MySQL Server上，每台服务器可以均衡写请求的次数

    二、库表太大产生的问题

    • 单库太大：单库处理能力有限、所在服务器上的磁盘空间不足、遇到IO瓶颈，需要把单库切分成更多更小的库

    • 单表太大：CURD效率都很低、数据量太大导致索引文件过大，磁盘IO加载索引花费时间，导致查询超时。所以只用索引还是不行的，需要把单表切分成多个数据集更小的表。MyCat提供的分表算法都在rule.xml，可以根据不同的分表算法进行拆分，比如根据时间拆分、一致性哈希、直接用主键对分表的个数取模等

    拆分策略

    单个库太大，先考虑是表多还是数据多：

    • 如果因为表多而造成数据过多，则使用垂直拆分，即根据业务拆分成不同的库

    • 如果因为单张表的数据量太大，则使用水平拆分，即把表的数据按照某种规则（rule.xml定义的分表算法）拆分成多张表

    分库分表的原则应该是先考虑垂直拆分，再考虑水平拆分

    三、垂直拆分

    分库分表和读写分离可以共同进行

    1. 垂直分库

    server.xml

    
123456
USERDB1,USERDB2

    配置了USERDB1、USERDB2这两个逻辑库

    schema.xml

    


	
	 
	
	
	  
	  
	
	
		select user()
		
	
	
	
		select user()

    两个逻辑库对应两个不同的数据节点，两个数据节点对应两个不同的物理机器

    MySQL分库分表实例分析

    mytest1和mytest2分成了不同机器上的不同的库，各包含一部分表，它们原来是合在一块的，在一台机器上，现在做了垂直的拆分。
    客户端就需要去连接不同的逻辑库了，根据业务操作不同的逻辑库

    MySQL分库分表实例分析

    然后配置了两个写库，两台机器把库平分了，分担了原来单机的压力。分库伴随着分表，从业务上对表拆分

    2. 垂直分表

    垂直分表，基于列字段进行。一般是针对几百列的这种大表，也避免查询时，数据量太大造成的“跨页”问题。

    一般是表中的字段较多，将不常用的， 数据较大，长度较长（比如text类型字段）的拆分到扩展表。访问频率较高的字段单独放在一张表

    四、水平分库分表

    针对数据量巨大的单张表（比如订单表），按照某种规则（RANGE、HASH取模等），切分到多张表里面去。不推荐使用，因为这些表仍然在同一个数据库中，因此执行针对整个数据库的操作可能存在IO瓶颈

    将单一表的数据分布到多个服务器上，每个服务器拥有一部分表和库，只不过表中的数据集合不同。分库分表技术的应用可以有效地缓解单机和单库在性能方面的瓶颈和压力，同时也能够突破与IO、连接数、硬件资源等相关的限制

    分库分表可以和主从复制同时进行，但不基于主从复制；读写分离才基于主从复制

    server.xml

    
	123456
	USERDB

    schema.xml

    


	
	
		
     
		
    
	
	
	
		select user()
		
	
	
		select user()
		
	

    MySQL分库分表实例分析
    

    user表示一个普通的表，直接放在数据节点dn1上，放在一台机器上，这张表不用进行拆分
    
							
    
								js-实现网站常用各种数据分析统计图形图表特效
								
    
									js-实现网站常用各种数据分析统计图形图表特效
									
    简洁大气网站常用各种数据分析统计图形图表js特效代码，包括各种环形图，饼状图，折线图，柱形图，地图等。​
    
								
    
								下载 
							
    
						
    

    student表的primaryKey是id，根据id拆分，放在dn1和dn2上，最终这个表要分在两台机器上，在物理上分开了，但是在逻辑上还是一个，往哪张表里增加，在2台机器上查询然后如何合并这些操作都是由mycat完成的
    

    拆分的规则是取模（mod - long)，每次插入用id模上存在的机器数（2）
    

    此外还需要在rule.xml中配置以下拆分算法
    

    找到算法mod-long，因为我们将逻辑表student分开映射到两台主机上，所以修改数据节点的数量为2
    

    MySQL分库分表实例分析
    

    2. 测试水平分表
    

    Linux主机
    

    MySQL分库分表实例分析
    

    Windows主机
    

    MySQL分库分表实例分析
    

    登录到mycat的8066端口
    

    MySQL分库分表实例分析
    

    使用MyCat给user表插入两条数据
    

    MySQL分库分表实例分析
    

    由于schema.xml配置文件中，逻辑表user只在Linux主机的mytest1库中存在，mycat操作的逻辑表user会影响Linux主机上的物理表，而不会影响Windows主机上的表。我们各自查看Linux和Windows主机的用户表：
    

    MySQL分库分表实例分析
    

    MySQL分库分表实例分析
    

    我们再通过MyCat给student表插入两条数据
    

    MySQL分库分表实例分析
    

    我们知道schema.xml配置文件中，逻辑表student对应两台主机上的两个库mytest1、mytest2中的两张表，所以对逻辑表插入的两条数据，会实际影响到两张物理表（用id%机器数，决定插入到哪张物理表）。我们分别查看一下Linux和Windows主机的student表：
    

    MySQL分库分表实例分析
    

    再通过MyCat插入id=3和id=4的数据，应该插入不同主机上的不同物理表
    

    MySQL分库分表实例分析
    

    MySQL分库分表实例分析
    

    这就相当于把student表进行水平拆分了
    

    通过MyCat查询的时候只需要正常输入就行，我们配置的是表拆分后放在这2个数据节点上，MyCat会根据配置在两个库上查询并进行数据合并
    

    MySQL分库分表实例分析
    					
					
    
													
    
								
    相关文章
    
							
    
							
    
																	
										
    mysql执行SQL出错一般发生在哪个阶段_错误定位方法
    
									    
																	
										
    如何减少死锁发生_mysql并发场景优化
    
									    
																	
										
    mysql中InnoDB的行级锁与共享锁、排他锁的区别
    
									    
																	
										
    mysql错误日志文件过大怎么办_mysql日志清理方案
    
									    
																	
										
    mysql如何优化查询条件_mysql查询条件性能优化
    
									    
															
    
													
    
								
    相关标签:
    
								
    
									mysql								
    
							
    
						
						
    本站声明：本文内容由网友自发贡献，版权归原作者所有，本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容，请联系admin@php.cn
    
						
    
													上一篇：MySQL日期时间数据类型有哪些
													下一篇：mysql时间戳如何转换
												
    
					
    

					
    
													
    
								
    
									
     
										
    作者最新文章
    
									
    
								
    
																	
    
										
    
											
												
    如何在Spryker项目中实现前端与后端高效通信？Spryker/Zed-Request与Composer助你轻松连接！
    
											    
											
    
												
    2025-09-12 12:40
    
											
    
										
    
								
    
																	
    
										
    
											
												
    如何高效生成唯一ID？Ramsey/Uuid助你解决分布式系统中的ID难题
    
											    
											
    
												
    2025-09-13 09:51
    
											
    
										
    
								
    
																	
    
										
    
											
												
    Yii2数据库迁移总是手动写？insolita/yii2-migration-generator助你告别繁琐，实现自动化！
    
											    
											
    
												
    2025-09-15 09:38
    
											
    
										
    
								
    
																	
    
										
    
											
												
    如何解决复杂系统可视化难题，Spryker/Graphviz助你轻松绘制依赖与状态图
    
											    
											
    
												
    2025-09-15 09:52
    
											
    
										
    
								
    
																	
    
										
    
											
												
    如何高效生成订单/发票号？SprykerSequenceNumber模块助你轻松搞定
    
											    
											
    
												
    2025-09-16 10:01
    
											
    
										
    
								
    
																	
    
										
    
											
												
    如何解决电商平台商品属性管理混乱的问题，使用SprykerProductAttribute模块助你实现灵活高效的数据管理
    
											    
											
    
												
    2025-09-16 12:23
    
											
    
										
    
								
    
																	
    
										
    
											
												
    解锁夸克浏览器AI搜索新功能_掌握夸克AI搜索的进阶玩法
    
											    
											
    
												
    2025-10-13 17:08
    
											
    
										
    
								
    
																	
    
										
    
											
												
    升级夸克浏览器体验AI搜索_夸克AI搜索核心功能深度解析
    
											    
											
    
												
    2025-10-28 20:58
    
											
    
										
    
								
    
																	
    
										
    
											
												
    微信朋友圈能不能定时发 微信朋友圈定时发送辅助工具使用
    
											    
											
    
												
    2026-01-11 08:41
    
											
    
										
    
								
    
																	
    
										
    
											
												
    企业微信朋友圈怎么定时发送 企业微信定时发布朋友圈教程
    
											    
											
    
												
    2026-01-19 01:11
    
											
    
										
    
								
    
															
    
						
						
    
							
    
								
     
									
    热门AI工具
    
								
    
								更多
							
    

							
    
																	
    
										
											DeepSeek
											
    
												
    DeepSeek
    
												
    幻方量化公司旗下的开源大模型平台
    
																									
    
																												
    AI大模型
    
																													
    开放平台
    
																											
    
																							
    
										    
									
    
																	
    
										
											豆包大模型
											
    
												
    豆包大模型
    
												
    字节跳动自主研发的一系列大型语言模型
    
																									
    
																												
    AI大模型
    
																											
    
																							
    
										    
									
    
																	
    
										
											通义千问
											
    
												
    通义千问
    
												
    阿里巴巴推出的全能AI助手
    
																									
    
																												
    AI大模型
    
																											
    
																							
    
										    
									
    
																	
    
										
											腾讯元宝
											
    
												
    腾讯元宝
    
												
    腾讯混元平台推出的AI助手
    
																									
    
																												
    文档处理
    
																													
    Excel 表格
    
																											
    
																							
    
										    
									
    
																	
    
										
											文心一言
											
    
												
    文心一言
    
												
    文心一言是百度开发的AI聊天机器人，通过对话可以生成各种形式的内容。
    
																									
    
																												
    AI大模型
    
																													
    中文写作
    
																											
    
																							
    
										    
									
    
																	
    
										
											讯飞写作
											
    
												
    讯飞写作
    
												
    基于讯飞星火大模型的AI写作工具，可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿
    
																									
    
																												
    中文写作
    
																													
    写作工具
    
																											
    
																							
    
										    
									
    
																	
    
										
											即梦AI
											
    
												
    即梦AI
    
												
    一站式AI创作平台，免费AI图片和视频生成。
    
																									
    
																												
    图片拼接
    
																													
    图画生成
    
																											
    
																							
    
										    
									
    
																	
    
										
											ChatGPT
											
    
												
    ChatGPT
    
												
    最最强大的AI聊天机器人程序，ChatGPT不单是聊天机器人，还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。
    
																									
    
																												
    AI大模型
    
																													
    中文写作
    
																											
    
																							
    
										    
									
    
																	
    
										
											智谱清言 - 免费全能的AI助手
											
    
												
    智谱清言 - 免费全能的AI助手
    
												
    智谱清言 - 免费全能的AI助手
    
																									
    
																												
    AI大模型
    
																													
    PC软件
    
																											
    
																							
    
										    
									
    
															
    




						
    

					
    


				


			
			
    
				
    
                    
                
    
				
    
					
    
						
     
							
    相关专题
    
						
    
						更多
					
    
					
    
													
    
								菜鸟裹裹入口以及教程汇总
								
    
									菜鸟裹裹入口以及教程汇总
									
    本专题整合了菜鸟裹裹入口地址及教程分享，阅读专题下面的文章了解更多详细内容。
    
									
    
										
     
											
    0
    
										
    
										
     
											
    2026.01.22
    
										
    
									
    
								
    
							
    
													
    
								Golang 性能分析与pprof调优实战
								
    
									Golang 性能分析与pprof调优实战
									
    本专题系统讲解 Golang 应用的性能分析与调优方法，重点覆盖 pprof 的使用方式，包括 CPU、内存、阻塞与 goroutine 分析，火焰图解读，常见性能瓶颈定位思路，以及在真实项目中进行针对性优化的实践技巧。通过案例讲解，帮助开发者掌握 用数据驱动的方式持续提升 Go 程序性能与稳定性。
    
									
    
										
     
											
    9
    
										
    
										
     
											
    2026.01.22
    
										
    
									
    
								
    
							
    
													
    
								html编辑相关教程合集
								
    
									html编辑相关教程合集
									
    本专题整合了html编辑相关教程合集，阅读专题下面的文章了解更多详细内容。
    
									
    
										
     
											
    56
    
										
    
										
     
											
    2026.01.21
    
										
    
									
    
								
    
							
    
													
    
								三角洲入口地址合集
								
    
									三角洲入口地址合集
									
    本专题整合了三角洲入口地址合集，阅读专题下面的文章了解更多详细内容。
    
									
    
										
     
											
    51
    
										
    
										
     
											
    2026.01.21
    
										
    
									
    
								
    
							
    
													
    
								AO3中文版入口地址大全
								
    
									AO3中文版入口地址大全
									
    本专题整合了AO3中文版入口地址大全，阅读专题下面的的文章了解更多详细内容。
    
									
    
										
     
											
    397
    
										
    
										
     
											
    2026.01.21
    
										
    
									
    
								
    
							
    
													
    
								妖精漫画入口地址合集
								
    
									妖精漫画入口地址合集
									
    本专题整合了妖精漫画入口地址合集，阅读专题下面的文章了解更多详细内容。
    
									
    
										
     
											
    118
    
										
    
										
     
											
    2026.01.21
    
										
    
									
    
								
    
							
    
													
    
								java版本选择建议
								
    
									java版本选择建议
									
    本专题整合了java版本相关合集，阅读专题下面的文章了解更多详细内容。
    
									
    
										
     
											
    3
    
										
    
										
     
											
    2026.01.21
    
										
    
									
    
								
    
							
    
													
    
								Java编译相关教程合集
								
    
									Java编译相关教程合集
									
    本专题整合了Java编译相关教程，阅读专题下面的文章了解更多详细内容。
    
									
    
										
     
											
    16
    
										
    
										
     
											
    2026.01.21
    
										
    
									
    
								
    
							
    
													
    
								C++多线程相关合集
								
    
									C++多线程相关合集
									
    本专题整合了C++多线程相关教程，阅读专题下面的的文章了解更多详细内容。
    
									
    
										
     
											
    11
    
										
    
										
     
											
    2026.01.21
    
										
    
									
    
								
    
							
    
											
    
				
    

				
    
					
    
						
     
							
    热门下载
    
						
    
						更多
					
    
					
    
						
    
							
    网站特效  
     /
							
    网站源码 
     /
							
    网站素材 
     /
							
    前端模板 
    
						
    
						
						
						
						
					
    
					

				
    

				
    
					
                
    



				
    
					
    
						
     
							
    相关下载
    
						
    
						更多
					
    
					
    
											
    js-实现网站常用各种数据分析统计图形图表特效
    
											
    jquery图片列表按顺序分类排列图片组效果
    
										
    

				
    

				
    
					
    
						
     
							
    精品课程
    
						
    
						更多
					
    
					
    
						
    
							
    相关推荐  
     /
							
    热门推荐 
     /
							
    最新课程 
    
						
    
						
    
													
    
								
									MySQL 教程
								
								
    
									MySQL 教程

									
    
										
    共48课时 | 1.9万人学习
    
									
    
								
    
							
    
													
    
								
									MySQL 初学入门（mosh老师）
								
								
    
									MySQL 初学入门（mosh老师）

									
    
										
    共3课时 | 0.3万人学习
    
									
    
								
    
							
    
													
    
								
									简单聊聊mysql8与网络通信
								
								
    
									简单聊聊mysql8与网络通信

									
    
										
    共1课时 | 805人学习
    
									
    
								
    
							
    
												
    

						

						
						

					
    
				
    

				
    
					
    
						
     
							
    最新文章
    
						
    
						更多
					
    
					
    
													
    mysql中事务中的持久性与一致性保证
    
													
    mysql事务中的加锁机制与锁等待
    
													
    mysql中的系统库有哪些_mysql系统数据库介绍
    
													
    mysql如何防止误删数据_mysql权限设计思路
    
													
    如何添加主键_mysql primary key设置
    
													
    mysql执行SQL出错一般发生在哪个阶段_错误定位方法
    
													
    如何查看当前运行sql_mysql执行状态查询
    
													
    如何减少死锁发生_mysql并发场景优化
    
													
    mysql中InnoDB的行级锁与共享锁、排他锁的区别
    
													
    mysql错误日志文件过大怎么办_mysql日志清理方案
    
											
    

				
    






			
    



		

	
	
	
    
    
    
        
    
            
    
                
    
                    
    
                        关于我们
                        免责申明
                        举报中心
                        意见反馈
                        讲师合作
                        广告合作
                        最新更新
                                                
    
                    
    
                    
    php中文网：公益在线php培训，帮助PHP学习者快速成长！
    
                    
    
                      
                        关注服务号
                        
                      
                        
                        技术交流群
                        
                      
                        
    
                    
    
                
    
                
            
    
            
    
                
    
                    
                    
    
                        
    PHP中文网订阅号
    
                        
    每天精选资源文章推送
    
                    
    
                
    
            
    
        
    
    
    
    
    
        
    Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号
    
    
    

    










	
	
		
	
	

    
    
  • 
        
    
            
    
                
                    
                    
    PHP学习
    
                    
            
    
        
    
    
    • 
    
  • 
        
    
            
    
                
                    
                    
    技术支持
    
                    
            
    
        
    
    
    • 
    
  • 
        
    
            
    
                
                    
                    
    返回顶部
    
                    
            
    
        
    
    
    •