我的编程空间,编程开发者的网络收藏夹
学习永远不晚

怎样对比mysqlpump和mysqldump的性能

短信预约 -IT技能 免费直播动态提醒
省份

北京

  • 北京
  • 上海
  • 天津
  • 重庆
  • 河北
  • 山东
  • 辽宁
  • 黑龙江
  • 吉林
  • 甘肃
  • 青海
  • 河南
  • 江苏
  • 湖北
  • 湖南
  • 江西
  • 浙江
  • 广东
  • 云南
  • 福建
  • 海南
  • 山西
  • 四川
  • 陕西
  • 贵州
  • 安徽
  • 广西
  • 内蒙
  • 西藏
  • 新疆
  • 宁夏
  • 兵团
手机号立即预约

请填写图片验证码后获取短信验证码

看不清楚,换张图片

免费获取短信验证码

怎样对比mysqlpump和mysqldump的性能

本篇文章给大家分享的是有关怎样对比mysqlpump和mysqldump的性能,小编觉得挺实用的,因此分享给大家学习,希望大家阅读完这篇文章后可以有所收获,话不多说,跟着小编一起来看看吧。

昨天测试了一下mysqlpump,今天来把剩下的补充完成,算是一个小的系列。

mysqlpump

在MySQL 5.7中做逻辑备份恢复有了一个新的工具mysqlpump,如果你掌握了mysqldump,那么使用mysqlpump就是分分钟的事情,因为很多参数都是很相似的,可以理解它是mysqldump的加强版,一个亮点就是有了并行的选项,使得数据备份的性能更加强大。

  有一点值得说明的是,为了保证数据一致性,我们一般备份都会使用--single-transaction的选项,在5.7.11以前,mysqlpump和并行参数是有冲突的,在这个版本之后做了修复。

  但是mysqlpump到底怎么样呢,我在5.7.17的版本中做了一些简单的测试,可以看出一些性能的差异。

  而mysqldump是大家最耳熟能详的工具了,如果没用过,都不好意思说自己会MySQL,这样一个工具和Oracle里的exp工具一般,经典而且功能丰富。  

测试环境说明

   为了尽可能保证导出的数据备份能够占用少的磁盘空间,我们经常会使用gzip来压缩,我们就分了几个场景来对比压缩,不压缩,开启并行后的数据备份的性能差异。

   我选取的数据集大小在30G左右。含有5个数据库,单表数据量在200万以上,单库的表数量在10个以上。

数据备份的测试结果

数据备份的测试场景自己做得多一些,当然备份层面的压缩暂时还没有测完整,其它的场景


optionrealidle%dump_size(byte)
mysqlpump compress=false 6m52.232s 85.92 26199028017

compress=false|gzip 43m12.574s 90.72 12571701197

compress=true 19m24.541s 80.48 26199028017

compress=true |gzip 43m12.515s 84.94 12571200219

parallelism=4  5m30.005s 76.43 26199028017

parallelism=4 |gzip 42m41.433s 90.51 12575331504

parallelism=8 4m44.177s 66.73 26199028017

parallelism=8 |gzip 42m50.417s 90.38 12574079375

parallelism=16 5m19.060s 90.38 26199028017

parallelism=16 |gzip 42m50.939s 89.65 12577618359

parallelism=32  5m10.220s 89.23 26199028017

parallelism=32 |gzip 45m47.022s 89.7 12577618359
mysqldump compress=false 9m19.785s 87.33 26176062499

compress=false |gzip 43m23.036s 90.97 12524413896

compress=true 37m42.052s 90.1 26176062499

compress=true |gzip 43m17.755s 85.89 12524413896

compress=true  38m55.968s 90.22 26176062499

compress=true |gzip 43m1.672s 85.77 12524413896

可以看到默认来说,导出一个30G左右的dump需要近7分钟,而启用了并行之后,并行度为4的时候,导出时间是5分半,提升了1.5分钟(20%),并行度为8之后提升了2分钟左右(30%)。而在系统层面做了压缩的时候,压缩率达到了近48%,而并行度在更大的时候,备份速度就差别不大了,一来也和CPU的情况有关,整体来说并行的效果还是不错的。在compress=true只是在服务端客户端交互中使用数据包压缩,最后的备份集大小是没有任何改变的。后续会测试使用不同的压缩算法,备份的性能差异。

系统层面压缩备份的情况

如果备份不通过gzip管道来压缩,而是直接生成备份压缩,效率如果呢。一个26G左右的备份,gzip压缩的时间大概是43m18.974s,其实还真不短,比预想的长多了。

数据导入效率

数据的导入,我就简单测试了两个场景,mysqlpump并行备份导出,导入,mysqldump备份导出导入

mysqlpump export  parallelism=4 7m

import 85m4.574s
mysqldump export  9m8.420s

import 97m9.760s

以上就是怎样对比mysqlpump和mysqldump的性能,小编相信有部分知识点可能是我们日常工作会见到或用到的。希望你能通过这篇文章学到更多知识。更多详情敬请关注亿速云行业资讯频道。

免责声明:

① 本站未注明“稿件来源”的信息均来自网络整理。其文字、图片和音视频稿件的所属权归原作者所有。本站收集整理出于非商业性的教育和科研之目的,并不意味着本站赞同其观点或证实其内容的真实性。仅作为临时的测试数据,供内部测试之用。本站并未授权任何人以任何方式主动获取本站任何信息。

② 本站未注明“稿件来源”的临时测试数据将在测试完成后最终做删除处理。有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341

怎样对比mysqlpump和mysqldump的性能

下载Word文档到电脑,方便收藏和打印~

下载Word文档

猜你喜欢

Hadoop和spark的性能对比

本篇内容主要讲解“Hadoop和spark的性能对比”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“Hadoop和spark的性能对比”吧!Hadoop和spark的性能有何区别。  如果说Had
2023-06-02

go和c++的map性能对比

Golang小白一枚,正在不断学习积累知识,现将学习到的知识记录一下,也是将我的所得分享给大家!而今天这篇文章《go和c++的map性能对比》带大家来了解一下##content_title##,希望对大家的知识积累有所帮助,从而弥补自己的不
go和c++的map性能对比
2024-04-04

Kubernetes几种存储方式性能对比是怎样的

Kubernetes几种存储方式性能对比是怎样的,相信很多没有经验的人对此束手无策,为此本文总结了问题出现的原因和解决方法,通过这篇文章希望你能解决这个问题。摘要展示了一个简单的存储对比,使用未经性能优化的多种存储提供的存储卷进行测试和比较
2023-06-04

Java 中 multiply 操作与加法操作的性能对比是怎样的?(Java multiply与加法性能对比)

在Java编程中,multiply(乘法)和加法是常见的算术运算操作。当处理大量数据或对性能有较高要求的场景时,了解这两种操作的性能差异是很重要的。一、乘法操作(multiply)
Java 中 multiply 操作与加法操作的性能对比是怎样的?(Java multiply与加法性能对比)
Java2024-12-15

PHP5和PHP8的性能和安全性:对比和改进

PHP是一种广泛应用的服务器端脚本语言,用于开发Web应用程序。它已经发展了多个版本,而本文将主要讨论PHP5和PHP8之间的比较,特别关注其在性能和安全性方面的改进。首先让我们来看看PHP5的一些特点。PHP5是在2004年发布的,它引
PHP5和PHP8的性能和安全性:对比和改进
2024-01-26

java中Memcached和Redis的性能对比

这篇文章将为大家详细讲解有关java中Memcached和Redis的性能对比,文章内容质量较高,因此小编分享给大家做个参考,希望大家阅读完这篇文章后对相关知识有一定的了解。Java的特点有哪些Java的特点有哪些1.Java语言作为静态面
2023-06-14

Laravel 和 CodeIgniter 的性能对比如何?

laravel 和 codeigniter 框架在性能上非常接近,差异很小,可能因应用程序用例而异。基准测试表明,codeigniter 在数据库查询方面略优,而 laravel 在某些视图渲染操作和路由解析方面略优。实战案例中,两者加载博
Laravel 和 CodeIgniter 的性能对比如何?
2024-05-12

比较Flask应用部署的Gunicorn和uWSGI性能对比

Flask应用部署:Gunicorn vs uWSGI的比较引言:Flask作为一种轻量级的Python Web框架,受到了很多开发者的喜爱。在将Flask应用部署到生产环境时,选择适合的服务器网关接口(Server Gateway In
比较Flask应用部署的Gunicorn和uWSGI性能对比
2024-01-17

Go语言和Java的区别:性能对比

性能对比:Go语言和Java概述Go语言和Java都是流行的编程语言,但它们在性能方面存在一些差异。Go语言因其出色的并发性和低延迟而闻名,而Java则因其稳定性和跨平台性而受到欢迎。在本文中,我们将比较这两种语言在性能方面的优缺点,并
Go语言和Java的区别:性能对比
2024-02-01

关于dubbo的RPC和RESTful性能及对比

这篇文章主要介绍了关于dubbo的RPC和RESTful性能及对比,具有很好的参考价值,希望对大家有所帮助。如有错误或未考虑完全的地方,望不吝赐教
2022-12-19

Firefox 95 和 Chrome 97 在 Linux 的性能对比

看看两款主流浏览器 —— Firefox 和 Chrome 最新版本在 Linux 桌面的性能对比。

Python中字典和列表性能的对比分析

本篇文章为大家展示了Python中字典和列表性能的对比分析,内容简明扼要并且容易理解,绝对能使你眼前一亮,通过这篇文章的详细介绍希望你能有所收获。Python列表和字典前面我们了解了 “大O表示法” 以及对不同的算法的评估,下面来讨论下 P
2023-06-15

PHP微框架:Slim 和 Phalcon 的路由性能对比

phalcon 的路由性能优于 slim。slim 使用基于字典的路由器,而 phalcon 使用基于编译的路由器,后者预编译路由规则以提高性能。PHP 微框架:Slim 和 Phalcon 的路由性能对比在 PHP 项目中,选择合适的微
PHP微框架:Slim 和 Phalcon 的路由性能对比
2024-05-21

Canvas渲染模式对性能和效果的影响是怎样的?

Canvas作为HTML5中的绘图API,其渲染模式对性能和效果有着重要的影响。在本文中,我们将详细探讨Canvas的渲染模式,并通过具体的代码示例来说明。2D渲染模式Canvas的2D渲染模式是最常见且默认的模式。在此模式下,我们可以使
Canvas渲染模式对性能和效果的影响是怎样的?
2024-01-17

编程热搜

目录