我的编程空间,编程开发者的网络收藏夹
学习永远不晚

如何有效优化Mysql瓶颈

短信预约 -IT技能 免费直播动态提醒
省份

北京

  • 北京
  • 上海
  • 天津
  • 重庆
  • 河北
  • 山东
  • 辽宁
  • 黑龙江
  • 吉林
  • 甘肃
  • 青海
  • 河南
  • 江苏
  • 湖北
  • 湖南
  • 江西
  • 浙江
  • 广东
  • 云南
  • 福建
  • 海南
  • 山西
  • 四川
  • 陕西
  • 贵州
  • 安徽
  • 广西
  • 内蒙
  • 西藏
  • 新疆
  • 宁夏
  • 兵团
手机号立即预约

请填写图片验证码后获取短信验证码

看不清楚,换张图片

免费获取短信验证码

如何有效优化Mysql瓶颈

下文给大家带来关于如何有效优化Mysql瓶颈,感兴趣的话就一起来看看这篇文章吧,相信看完如何有效优化Mysql瓶颈对大家多少有点帮助吧。

Mysql 瓶颈优化(从小业务到大业务的转变)

假设一个网站(discuz)从最开始访问量很小做到日pv千万,我们来推测一下它的mysql服务器架构演变过程。
1. 第一阶段
网站访问量日pv量级在1w以下。单台机器跑web和db,不需要做架构层调优(比如,不需要增加memcached缓存)。此时,数据往往都是每日冷备份的,但有时候如果考虑数据安全性,会搭建一个mysql主从。
2. 第二阶段
网站访问量日pv达到几万。此时单台机器已经有点负载,需要我们把web和db分开,需要搭建memcached服务作为缓存。也就是说,在这个阶段,我们还可以使用单台机器跑mysql去承担整个网站的数据存储和查询。如果做mysql主从,目的也是为了数据安全性。
3. 第三阶段
网站访问量日pv达到几十万。单台机器虽然也可以支撑,但是需要的机器配置要比之前的机器好很多。如果经费允许,可以购买配置很高的机器来跑mysql服务,但是并不是说,配置翻倍,性能也翻倍,到了一定阶段配置增加已经不能带来性能的增加。所以,此阶段,我们会想到做mysql服务的集群,也就是说我们可以拿多台机器跑mysql。但,mysql的集群和web集群是不一样的,我们需要考虑数据的一致性,所以不能简单套用做web集群的方式(lvs,nginx代理)。可以做的架构是,mysql主从,一主多从。为了保证架构的健壮和数据完整,主只能是一个,从可以是多个。
还有一个问题,我们需要想到,就是在前端web层,我们的程序里面指定了mysql机器的ip,那么当mysql机器有多台时,程序里面如何去配置?discuz,其实有一个功能,支持mysql读写分离。即,我们可以拿多台机器跑mysql,其中一台写,其他多台是读,我们只需要把读和写的ip分别配置到程序中,程序自动会去区分机器。当然,如果不使用discuz自带的配置,我们还可以引用一个软件叫做 mysql-proxy, 使用他来实现读写分离。它支持一主多从的模式。
4. 第四阶段
    网站访问量日pv到几百万。之前的一主多从模式已经遇到瓶颈,因为当网站访问量变大,读数据库的量也会越来越大,我们需要多加一些从进来,但是从的数量增加到数十台时,由于主需要把bin-log全部分发到所有从上,那么这个过程本身就是一件很繁琐的事情,再加上频繁读取,势必会造成从上同步过来的数据有很大延迟。所以,我们可以做一个优化,把mysql原来的一主多从变为一主一从,然后从作为其他从的主,而前面的主只负责网站业务的写入,而后面的从不负责网站任何业务,只负责给其他从同步bin-log。这样还可以继续多叠加几个从库。
5. 第五阶段
    网站访问量日pv到1千万的时候,我们发现,网站的写入量非常大,我们之前架构中只有一个主,这里的主已经成为瓶颈了。所以,需要再近一步做出调整。比如,我们可以把业务分模块,把用户相关的单独分离出来,把权限、积分等也可以分离出来单独跑一个库,然后再做主从,也就是所谓的分库。当然也可以换一个纬度,把访问量或者写入量大的表单独分离出来,跑在一台服务器上,也可以把一个表分成多个小表。这一步操作,涉及到一些程序上的改动,所以需要事先和开发同事做好沟通和设计。总之,这一步要做的就是分库分表。

   再往后发展,继续把大表分小表即可。 而国内阿里淘宝网站的数据量是巨量的,他们的数据库全部都是mysql,他们的mysql架构就是遵循分库分表这个原则的,只不过他们划分规则会有很多纬度,比如可以根据地域划分,可以根据买家、卖家划分,可以根据时间划分等等。

看了以上关于如何有效优化Mysql瓶颈详细内容,是否有所收获。如果想要了解更多相关,可以继续关注我们的行业资讯板块。

免责声明:

① 本站未注明“稿件来源”的信息均来自网络整理。其文字、图片和音视频稿件的所属权归原作者所有。本站收集整理出于非商业性的教育和科研之目的,并不意味着本站赞同其观点或证实其内容的真实性。仅作为临时的测试数据,供内部测试之用。本站并未授权任何人以任何方式主动获取本站任何信息。

② 本站未注明“稿件来源”的临时测试数据将在测试完成后最终做删除处理。有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341

如何有效优化Mysql瓶颈

下载Word文档到电脑,方便收藏和打印~

下载Word文档

猜你喜欢

如何优化MyBatis iterate的性能瓶颈

MyBatis 的 iterate 方法在处理大量数据时可能会遇到性能瓶颈。以下是一些建议,帮助你优化 MyBatis iterate 的性能:分页查询:当处理大量数据时,可以使用分页查询来减少每次查询的数据量。通过设置合适的分页大小,可以
如何优化MyBatis iterate的性能瓶颈
2024-09-18

Golang 技术性能优化中如何分析性能瓶颈?

通过使用 pprof 和 trace 等工具,可以分析 go 应用程序的性能瓶颈。具体步骤包括:使用 pprof 生成阻塞剖析报告以识别阻塞时间最长的函数。使用 trace 记录应用程序执行并分析跟踪文件以识别导致高延迟或 cpu 使用率的
Golang 技术性能优化中如何分析性能瓶颈?
2024-05-13

如何解决PHP开发中的性能瓶颈和优化问题

在PHP开发过程中,性能瓶颈和优化问题是我们经常面对的挑战。一个高效的PHP应用程序可以提升用户体验,减少服务器负载,并节省成本。本文将探讨一些常见的性能瓶颈问题,并提供一些解决方案和代码示例。一、数据库查询优化数据库查询是PHP应用程序中
2023-10-21

PHP框架性能优化:如何克服瓶颈、提高响应时间

php 框架性能优化可大幅提升响应时间。可以通过识别性能瓶颈(如数据库查询、内存泄漏)并实施优化措施来克服:优化数据库查询(使用索引、缓存、优化语法)缓存和页面加速(使用内存缓存、页面缓存、gzip 压缩)优化内存管理(适当引用计数、释放不
PHP框架性能优化:如何克服瓶颈、提高响应时间
2024-05-23

如何有效地使用MySQL的查询优化功能?

如何有效地使用MySQL的查询优化功能?摘要:MySQL是一种常用的关系型数据库管理系统,优化查询性能对于提升系统的性能至关重要。本文将介绍一些常见的MySQL查询优化技巧,并给出相关的代码示例,帮助读者更好地理解如何有效地使用MySQL的
2023-10-22

如何从RocketMQ消息持久化设计看磁盘性能瓶颈的突破

今天就跟大家聊聊有关如何从RocketMQ消息持久化设计看磁盘性能瓶颈的突破,可能很多人都不太了解,为了让大家更加了解,小编给大家总结了以下内容,希望大家根据这篇文章可以有所收获。从RocketMQ消息持久化设计看磁盘性能瓶颈的突破分布式消
2023-06-19

如何优化MySQL表?

优化 MySQL 表是提高数据库性能和效率的关键一步。通过采用有效的优化技术,您可以提高查询执行速度、降低存储要求并优化资源利用率。本文探讨了优化 MySQL 表的各种策略和最佳实践,使您能够最大限度地提高数据库驱动的应用程序的性能。在本
2023-10-22

MySQL如何优化索引

1. MySQL如何使用索引 索引用于快速查找具有特定列值的行。如果没有索引,MySQL必须从第一行开始,然后遍历整个表以找到相关的行。表越大,花费越多。如果表中有相关列的索引,MySQL可以快速确定要在数据文件中间查找的位置,而不必查看
2022-05-27

如何优化MySQL查询

这篇文章给大家介绍如何优化MySQL查询,内容非常详细,感兴趣的小伙伴们可以参考借鉴,希望对大家能有所帮助。解析器和预处理器一开始,MySQL 的解析器将查询语句拆分成一系列指令并从中构建一棵“解析树”。解析器使用 MySQL 的SQL 语
2023-06-15

如何优化Shell脚本效率

这篇文章将为大家详细讲解有关如何优化Shell脚本效率,小编觉得挺实用的,因此分享给大家做个参考,希望大家阅读完这篇文章后可以有所收获。一、先说一下Shell脚本语言自身的局限性 作为解释型的脚本语言,天生就有效率上边的缺陷。尽管它调用的其
2023-06-09

编程热搜

目录