我的编程空间,编程开发者的网络收藏夹
学习永远不晚

Mysql千万级别水平分表优化

短信预约 信息系统项目管理师 报名、考试、查分时间动态提醒
省份

北京

  • 北京
  • 上海
  • 天津
  • 重庆
  • 河北
  • 山东
  • 辽宁
  • 黑龙江
  • 吉林
  • 甘肃
  • 青海
  • 河南
  • 江苏
  • 湖北
  • 湖南
  • 江西
  • 浙江
  • 广东
  • 云南
  • 福建
  • 海南
  • 山西
  • 四川
  • 陕西
  • 贵州
  • 安徽
  • 广西
  • 内蒙
  • 西藏
  • 新疆
  • 宁夏
  • 兵团
手机号立即预约

请填写图片验证码后获取短信验证码

看不清楚,换张图片

免费获取短信验证码

Mysql千万级别水平分表优化

Mysql千万级别水平分表优化

  需求:随着数据量的增加单表已经不能很好的支持业务,千万级别数据查询缓慢

  Mysql数据优化方案:

  方案一:使用myisam进行水平分表优化

  方案二:使用mysql分区优化

  一:Myisam水平分区

  1、创建水平分表 user_1:

  -- 创建水平分表

  create table user_1(

  id varchar(50) PRIMARY key COMMENT "主键id",

  user_name varchar(50) DEFAULT null COMMENT "用户名称",

  creator varchar(50) DEFAULT null COMMENT "创建者",

  create_date datetime DEFAULT null COMMENT "创建时间",

  updater varchar(50) DEFAULT null COMMENT "更新者",

  update_date datetime DEFAULT null COMMENT "更新时间"

  )ENGINE=MyISAM DEFAULT CHARSET=utf8 COMMENT="用户1表";

  2、创建水平分表 user_2:

  create table user_2(

  id varchar(50) PRIMARY key COMMENT "主键id",

  user_name varchar(50) DEFAULT null COMMENT "用户名称",

  creator varchar(50) DEFAULT null COMMENT "创建者",

  create_date datetime DEFAULT null COMMENT "创建时间",

  updater varchar(50) DEFAULT null COMMENT "更新者",

  update_date datetime DEFAULT null COMMENT "更新时间"

  )ENGINE=MyISAM DEFAULT CHARSET=utf8 COMMENT="用户2表";

  3、创建水平分表 user

  -- 创建总表

  create table user(

  id varchar(50) PRIMARY key COMMENT "主键id",

  user_name varchar(50) DEFAULT null COMMENT "用户名称",

  creator varchar(50) DEFAULT null COMMENT "创建者",

  create_date datetime DEFAULT null COMMENT "创建时间",

  updater varchar(50) DEFAULT null COMMENT "更新者",

  update_date datetime DEFAULT null COMMENT "更新时间"

  )ENGINE=MRG_MyISAM DEFAULT CHARSET=utf8 INSERT_METHOD=LAST UNION=(

  `user_1`,`user_2`);

  4、新增添加分区 user_3

  create table user_3(

  id varchar(50) PRIMARY key COMMENT "主键id",

  user_name varchar(50) DEFAULT null COMMENT "用户名称",

  creator varchar(50) DEFAULT null COMMENT "创建者",

  create_date datetime DEFAULT null COMMENT "创建时间",

  updater varchar(50) DEFAULT null COMMENT "更新者",

  update_date datetime DEFAULT null COMMENT "更新时间"

  )ENGINE=MyISAM DEFAULT CHARSET=utf8 COMMENT="用户3表";

  初始化数据

  -- 插入数据

  insert into user_1(`id`,`user_name`,`create_date`,`update_date`) values ("1","张三",now(),now());

  insert into user_1(`id`,`user_name`,`create_date`,`update_date`) values ("2","李四",now(),now());

  insert into user_2(`id`,`user_name`,`create_date`,`update_date`) values ("1","王五",now(),now());

  insert into user_3(`id`,`user_name`,`create_date`,`update_date`) values ("3","赵六3",now(),now());

  insert into user(`id`,`user_name`,`create_date`,`update_date`) values ("4","老赵1",now(),now());

  验证数据结果:通过

  5、重新添加分区

  alter table user UNION=(`user_1`,`user_2`,`user_3`);

  参数说明

  1:分表ENGINE必须为:MyISAM,总表必须为MRG_MyISAM

  2:INSERT_METHOD:向总表插入数据默认到哪个位置取值:

  0:不允许插入

  1:允许插入

  FIRST:merge的第一张表

  LAST:merge的最后一张表

  出现异常错误  郑州看男科医院那家好:http://www.xasgnanke.com/郑州治男科哪家医院好:http://www.xasgnanke.com/郑州男科医院排名:http://www.xasgnanke.com/

  1168 - Unable to open underlying table which is differently defined or of non-MyISAM type or doesn"t exist

  问题定位:

  分表MERGE引擎仅适用于MYISAM表

  union了不存在的表或者不在同一个数据库中的表

  表的结构不一致

  ————————————————

  版权声明:本文为CSDN博主「吴豪磊」的原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接及本声明。

  原文链接:https://blog.csdn.net/qq_31150503/article/details/105450236

免责声明:

① 本站未注明“稿件来源”的信息均来自网络整理。其文字、图片和音视频稿件的所属权归原作者所有。本站收集整理出于非商业性的教育和科研之目的,并不意味着本站赞同其观点或证实其内容的真实性。仅作为临时的测试数据,供内部测试之用。本站并未授权任何人以任何方式主动获取本站任何信息。

② 本站未注明“稿件来源”的临时测试数据将在测试完成后最终做删除处理。有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341

Mysql千万级别水平分表优化

下载Word文档到电脑,方便收藏和打印~

下载Word文档

猜你喜欢

Mysql千万级别水平分表优化

需求:随着数据量的增加单表已经不能很好的支持业务,千万级别数据查询缓慢   Mysql数据优化方案:   方案一:使用myisam进行水平分表优化   方案二:使用mysql分区优化   一:Myisam水平分区   1、创建水平分表 user_1:   --
Mysql千万级别水平分表优化
2016-01-31

mysql千万级大表的优化

千万级大表,这是一个很有技术含量的问题。一般碰到这种问题,我们下意识的会想对表进行拆分或者分区,但是其实,要从多个维度去考虑这个事情。 问题分解 我们首先找到关键字: 千万级大表优化 那么也就对应了相应的知识点: 数据量操作对象动作和结果 数据量 千万级是什
mysql千万级大表的优化
2016-05-12

MySQL中怎么优化千万级数据表

MySQL中怎么优化千万级数据表,很多新手对此不是很清楚,为了帮助大家解决这个难题,下面小编将为大家详细讲解,有这方面需求的人可以来学习下,希望你能有所收获。我这里有张表,数据有1000w,目前只有一个主键索引CREATE TABLE `u
2023-06-20

MySQL 对于千万级的大表要怎么优化?

首先采用Mysql存储千亿级的数据,确实是一项非常大的挑战。Mysql单表确实可以存储10亿级的数据,只是这个时候性能非常差,项目中大量的实验证明,Mysql单表容量在500万左右,性能处于最佳状态。 针对大表的优化,主要是通过数据库分库分表来解决,目前比较普
MySQL 对于千万级的大表要怎么优化?
2015-09-18

线上千万级大表排序优化

大家好我是不一样的科技宅,每天进步一点点,体验不一样的生活,今天我们聊一聊Mysql大表查询优化,前段时间应急群有客服反馈,会员管理功能无法按到店时间、到店次数、消费金额 进行排序。经过排查发现是Sql执行效率低,并且索引效率低下。应急问题  商户反馈会员管理
线上千万级大表排序优化
2020-07-18

MySQL千万级数据的大表优化解决方案

目录1.数据库设计和表创建时就要考虑性能设计表时要注意:索引简言之就是使用合适的数据类型,选择合适的索引引擎2.sql的编写需要注意优化3.分区分区的好处是:分区的限制和缺点:分区的类型:4.分表5.分库mysql数据库中的表数据量几千万后
2022-11-20

phper使用MySQL 针对千万级的大表要怎么优化?

有需要学习交流的友人请加入交流群的咱们一起,有问题一起交流,一起进步!前提是你是学技术的。感谢阅读!点此加入该群​jq.qq.com首先采用Mysql存储千亿级的数据,确实是一项非常大的挑战。Mysql单表确实可以存储10亿级的数据,只是这个时候性能非常差,项
phper使用MySQL 针对千万级的大表要怎么优化?
2020-09-12

MySQL单表千万级数据处理的思路分享

目录项目背景改进思路观察数据特征多进程处理思路总结数据处理技巧项目背景 在处理过程中,今天上午需要更新A字段,下午爬虫组完成了规格书或图片的爬取又需要更新图片和规格书字段,由于单表千万级深度翻页会导致处理速度越来越慢。select a,b,
2022-05-20

MySQL两千万数据大表优化过程,三种解决方案!

使用阿里云rds for MySQL数据库(就是MySQL5.6版本),有个用户上网记录表6个月的数据量近2000万,保留最近一年的数据量达到4000万,查询速度极慢,日常卡死。严重影响业务。 问题前提:老系统,当时设计系统的人大概是大学没毕业,表设计和sql
MySQL两千万数据大表优化过程,三种解决方案!
2019-01-13

编程热搜

目录