我的编程空间,编程开发者的网络收藏夹
学习永远不晚

怎么drop掉mysql库中的1TB表单

短信预约 -IT技能 免费直播动态提醒
省份

北京

  • 北京
  • 上海
  • 天津
  • 重庆
  • 河北
  • 山东
  • 辽宁
  • 黑龙江
  • 吉林
  • 甘肃
  • 青海
  • 河南
  • 江苏
  • 湖北
  • 湖南
  • 江西
  • 浙江
  • 广东
  • 云南
  • 福建
  • 海南
  • 山西
  • 四川
  • 陕西
  • 贵州
  • 安徽
  • 广西
  • 内蒙
  • 西藏
  • 新疆
  • 宁夏
  • 兵团
手机号立即预约

请填写图片验证码后获取短信验证码

看不清楚,换张图片

免费获取短信验证码

怎么drop掉mysql库中的1TB表单

这篇文章主要介绍“怎么drop掉mysql库中的1TB表单”的相关知识,小编通过实际案例向大家展示操作过程,操作方法简单快捷,实用性强,希望这篇“怎么drop掉mysql库中的1TB表单”文章能帮助大家解决问题。

1、清除Buffer Pool缓冲

drop table时,innodb引擎会清理该表在每个buffer pool实例中中对应的数据块页面,为了避免对系统的影响,这里的清除操作并不是真正的flush,而是将涉及到的页面从flush队列中摘除。但在摘除过程中,删除进程会持有每个buffer pool的全局锁,然后搜索这个buffer pool里对应的页面以便从flush list中删除。如果在buffer pool中需要被搜索并删除的页面过多,那么遍历时间就会增大,这就导致了其他事务操作被阻塞,严重时可导致数据库锁住。

(推荐课程:MySQL教程)

在这里还需要注意一件事情,如果数据库的buffer pool设置的很大,就会导致遍历时间变长清理buffer pool时,还包含清理AHI包含此表的数据,AHI的功能在这里就不多说了,主要是当b+tree的层级变高时,为避免b+tree逐层搜索,AHI能根据某个检索条件,直接查询到对应的数据页,跳过逐层定位的步骤。其次AHI会占用 1/16 的buffer pool的大小,如果线上表数据不是特别大,不是超高并发,不建议将开启AHI,可以考虑关闭AHI功能

mysql> SHOW GLOBAL VARIABLES LIKE 'innodb_adaptive_hash_index';+----------------------------+-------+| Variable_name                   | Value |+----------------------------+-------+| innodb_adaptive_hash_index | ON    |+----------------------------+-------+1 row in set (0.01 sec)mysql> SET GLOBAL innodb_adaptive_hash_index=OFF;Query OK, 0 rows affected (0.00 sec)mysql> SHOW GLOBAL VARIABLES LIKE 'innodb_adaptive_hash_index';+----------------------------+-------+| Variable_name                   | Value |+----------------------------+-------+| innodb_adaptive_hash_index | OFF   |+----------------------------+-------+1 row in set (0.01 sec)

2、删除对应的磁盘数据文件ibd

在删除数据文件时,如果数据文件过大,删除过程会产生大量的IO并耗费更多的时间,造成磁盘IO开销飙升,CPU负载过高,影响其他程序运行。我的一个好伙伴,就曾在线上库删除了一张 1TB 大小的表,结果20分钟,数据库无响应,最后库崩溃,重启了。

既然知道drop table做了2件事情,那就针对以上 2 个事情进行优化

在清除Buffer Pool缓冲上,为减少当个buffer pool的大小,可以合理设置innodb_buffer_pool_instances参数,减少buffer pool数据块列表扫描时间,同时关闭AHI功能

在步骤2上,可以巧妙的利用linux的硬连接特性,延迟删除真正的物理文件。

当多个文件名同时指向同一个INODE时,这个INODE的引用数 N>1, 删除其中任何一个文件名都会很快.因为其直接的物理文件块没有被删除.只是删除了一个指针而已;当INODE的引用数 N=1 时, 删除文件需要去把这个文件相关的所有数据块清除,所以会比较耗时;

如果给数据库表的.ibd文件创建一个硬链接,当删除表时,删除物理文件时,其实删除的就是物理文件的一个指针,所以删除操作响应速度会非常快,大约不到1秒左右

下面就来演示一下具体的操作

先创建表文件的硬链接ln t_test.ibd t_test.ibd.bak删除表drop table t_test;

最后就是要真正删除掉物理文件,释放文件所占用的磁盘空间,那么问题来了,如果优雅的删除物理文件呢,在这里推荐大家coreutils工具集中的truncate命令

当然需要你先安装相关的软件包

wget http://ftp.gnu.org/gnu/coreutils/coreutils-8.29.tar.xz使用非root进行解压tar -xvJf coreutils-8.29.tar.xzcd coreutils-8.29./configuremake使用root进行make install

安装好之后,就可以写一个脚本,非常优雅的分布删除大文件,${i}G 表示,每次删除 10G

#!/bin/bashTRUNCATE=/usr/local/bin/truncatefor i in `seq 2194 -10 10 `; do   sleep 2  $TRUNCATE -s ${i}G /data/mysql/t_test.ibd.hdlk donerm -rf /data/mysql/t_test.ibd.hdlk ;

关于“怎么drop掉mysql库中的1TB表单”的内容就介绍到这里了,感谢大家的阅读。如果想了解更多行业相关的知识,可以关注编程网行业资讯频道,小编每天都会为大家更新不同的知识点。

免责声明:

① 本站未注明“稿件来源”的信息均来自网络整理。其文字、图片和音视频稿件的所属权归原作者所有。本站收集整理出于非商业性的教育和科研之目的,并不意味着本站赞同其观点或证实其内容的真实性。仅作为临时的测试数据,供内部测试之用。本站并未授权任何人以任何方式主动获取本站任何信息。

② 本站未注明“稿件来源”的临时测试数据将在测试完成后最终做删除处理。有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341

怎么drop掉mysql库中的1TB表单

下载Word文档到电脑,方便收藏和打印~

下载Word文档

猜你喜欢

怎么drop掉mysql库中的1TB表单

这篇文章主要介绍“怎么drop掉mysql库中的1TB表单”的相关知识,小编通过实际案例向大家展示操作过程,操作方法简单快捷,实用性强,希望这篇“怎么drop掉mysql库中的1TB表单”文章能帮助大家解决问题。1、清除Buffer Poo
2023-06-27

mysql中怎么用drop删除表中数据

在MySQL中,可以使用DROP TABLE语句来删除表中的数据。下面是一个示例:DROP TABLE table_name;其中,table_name是要删除数据的表名。请注意,使用DROP TABLE语句将会删除整个表,包括表结构
2023-10-23

Mycat中怎么实现MySQL单库分表

Mycat中怎么实现MySQL单库分表,针对这个问题,这篇文章详细介绍了相对应的分析和解答,希望可以帮助更多想解决这个问题的小伙伴找到更简单易行的方法。一、Mycat安装部署安装环境Linux 目前只有1.6.5版本支持单库分表。
2023-06-19

怎么查看mysql数据库中的表

要查看MySQL数据库中的表,可以使用以下几种方法:使用命令行工具:登录到MySQL数据库的命令行界面,然后使用以下命令来查看所有的表:SHOW TABLES;使用MySQL Workbench:打开MySQL Workbench工具,连接
怎么查看mysql数据库中的表
2024-04-09

怎么提交表单中disabled表单域的值

这篇文章给大家分享的是有关怎么提交表单中disabled表单域的值的内容。小编觉得挺实用的,因此分享给大家做个参考,一起跟随小编过来看看吧。如果表单中的某个表单域被设定为disabled,则该表单域的值就不会被提交。但是有的时候确实需要提交
2023-06-08

mysql怎么查询数据库中的表名

本篇内容介绍了“mysql怎么查询数据库中的表名”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!查询数据库中的表名查询一个数据库中含有某关键词
2023-01-30

mysql数据库中表怎么删除

删除 mysql 数据库中的表的步骤如下:确保拥有删除权限。使用 drop table table_name 命令删除表。可使用附加选项,如级联删除外键 (cascade) 或检查表是否存在 (if exists)。在删除表之前,请确保备份
mysql数据库中表怎么删除
2024-08-05

PHP怎么将MySQL中数据导入表单

使用PHP将MySQL数据导入表单。本文提供分步说明,包括建立数据库连接、获取数据、构建表单、填充表单和处理表单提交。此方法对于在更新或编辑数据库记录时或在表单中显示预填数据时非常有用。
PHP怎么将MySQL中数据导入表单
2024-04-12

PHP怎么将MySQL中数据导入表单

要将MySQL中的数据导入表单,首先需要连接到MySQL数据库,然后执行查询语句,将查询结果赋值给表单的各个字段。以下是一个简单的示例代码:```php// 连接到MySQL数据库$mysqli = new mysqli('localhos
2023-10-12

编程热搜

目录