我的编程空间,编程开发者的网络收藏夹
学习永远不晚

MySQL中怎么有效的删除一个大表

短信预约 -IT技能 免费直播动态提醒
省份

北京

  • 北京
  • 上海
  • 天津
  • 重庆
  • 河北
  • 山东
  • 辽宁
  • 黑龙江
  • 吉林
  • 甘肃
  • 青海
  • 河南
  • 江苏
  • 湖北
  • 湖南
  • 江西
  • 浙江
  • 广东
  • 云南
  • 福建
  • 海南
  • 山西
  • 四川
  • 陕西
  • 贵州
  • 安徽
  • 广西
  • 内蒙
  • 西藏
  • 新疆
  • 宁夏
  • 兵团
手机号立即预约

请填写图片验证码后获取短信验证码

看不清楚,换张图片

免费获取短信验证码

MySQL中怎么有效的删除一个大表

MySQL中怎么有效的删除一个大表,很多新手对此不是很清楚,为了帮助大家解决这个难题,下面小编将为大家详细讲解,有这方面需求的人可以来学习下,希望你能有所收获。

在MySQL中如何有效的删除一个大表?

在DROP TABLE 过程中,所有操作都会被HANG住。

这是因为INNODB会维护一个全局独占锁(在table cache上面),直到DROP TABLE完成才释放。
在我们常用的ext3,ext4,ntfs文件系统,要删除一个大文件(几十G,甚至几百G)还是需要点时间的。
下面我们介绍一个快速DROP table 的方法; 不管多大的表,INNODB 都可以很快返回,表删除完成;
实现:巧用LINK(硬链接)

实测:

root@127.0.0.1 : test 21:38:00> show table status like ‘tt’ \G
*************************** 1. row ***************************
Name: tt
Engine: InnoDB
Version: 10
Row_format: Compact
Rows: 151789128
Avg_row_length: 72
Data_length: 11011096576
Max_data_length: 0
Index_length: 5206179840
Data_free: 7340032
Auto_increment: NULL
Create_time: 2011-05-18 14:55:08
Update_time: NULL
Check_time: NULL
Collation: utf8_general_ci
Checksum: NULL
Create_options:
Comment:
1 row in set (0.22 sec)

root@127.0.0.1 : test 21:39:34> drop table tt ;
Query OK, 0 rows affected (25.01 sec)

删除一个11G的表用时25秒左右(硬件不同,时间不同);

下面我们来对另一个更大的表进行删除;
但之前,我们需要对这个表的数据文件做一个硬连接:

root@ # ln stock.ibd stock.id.hdlk
root@ # ls stock.* -l
-rw-rw—- 1 MySQL mysql        9196 Apr 14 23:03 stock.frm
-rw-r–r– 2 mysql mysql 19096666112 Apr 15 09:55 stock.ibd
-rw-r–r– 2 mysql mysql 19096666112 Apr 15 09:55 stock.id.hdlk

你会发现stock.ibd的INODES属性变成了2;

下面我们继续来删表。

root@127.0.0.1 : test 21:44:37> show table status like ‘stock’ \G
*************************** 1. row ***************************
Name: stock
Engine: InnoDB
Version: 10
Row_format: Compact
Rows: 49916863
Avg_row_length: 356
Data_length: 17799577600
Max_data_length: 0
Index_length: 1025507328
Data_free: 4194304
Auto_increment: NULL
Create_time: 2011-05-18 14:55:08
Update_time: NULL
Check_time: NULL
Collation: utf8_general_ci
Checksum: NULL
Create_options:
Comment:
1 row in set (0.23 sec)

root@127.0.0.1 : test 21:39:34> drop table stock ;
Query OK, 0 rows affected (0.99 sec)

1秒不到就删除完成; 也就是DROP TABLE不用再HANG这么久了。
但table是删除了,数据文件还在,所以你还需要最后数据文件给删除。

root # ll
total 19096666112
-rw-r–r– 2 mysql mysql 19096666112 Apr 15 09:55 stock.id.hdlk
root # rm stock.id.hdlk
虽然DROP TABLE 多绕了几步。(如果你有一个比较可靠的自运行程序(自动为大表建立硬链接,并会自动删除过期的硬链接文件),就会显得不那么繁琐。)
这样做能大大减少MYSQL HANG住的时间; 相信还是值得的。

至于原理: 就是利用OS HARD LINK的原理,
当多个文件名同时指向同一个INODE时,这个INODE的引用数N>1, 删除其中任何一个文件名都会很快.
因为其直接的物理文件块没有被删除.只是删除了一个指针而已;
当INODE的引用数N=1时, 删除文件需要去把这个文件相关的所有数据块清除,所以会比较耗时;



【问题隐患】

    由于业务需求不断变化,可能在DB中存在超大表占用空间或影响性能;对这些表的处理操作,容易造成MySQL性能急剧下降,IO性能占用严重等。先前有在生产库drop table造成服务不可用;rm 大文件造成io跑满,引发应用容灾;对大表的操作越轻柔越好。

    【解决办法】

    1.通过硬链接减少mysql DDL时间,加快锁释放

    2.通过truncate分段删除文件,避免IO hang

    【生产案例】

    某对mysql主备,主库写入较大时发现空间不足,需要紧急清理废弃大表,但不能影响应用访问响应:

    $ll /u01/mysql/data/test/tmp_large.ibd

    -rw-r-– 1 mysql dba 289591525376 Mar 30  2012 tmp_large.ibd

    270GB的大表删除变更过程如下:

    #(备库先做灰度)

    ln tmp_large.ibd /u01/bak/tmp_tbl.ibd  #建立硬链接

    -rw-r-– 2 mysql dba 289591525376 Mar 30  2012 tmp_large.ibd

    set session sql_log_bin=0;

    #不计入bin log节省性能,并且防止主备不一致

    desc test.tmp_large;

    drop table test.tmp_large;

    Query OK, 0 rows affected (10.46 sec)  mysql -uroot -e “start slave;”

    cd /u01/bak;screen -S weixi_drop_table  for i in `seq 270 -1 1 ` ;

    do sleep 2;truncate -s ${i}G tmp_tbl.ibd;done

    rm -rf tmp_tbl.ibd

    【性能比较】

    中间ctrl-C一次,可以看到truncate前后io的对比情况,基本上影响不大

    文件大小也成功更新

看完上述内容是否对您有帮助呢?如果还想对相关知识有进一步的了解或阅读更多相关文章,请关注亿速云行业资讯频道,感谢您对亿速云的支持。

免责声明:

① 本站未注明“稿件来源”的信息均来自网络整理。其文字、图片和音视频稿件的所属权归原作者所有。本站收集整理出于非商业性的教育和科研之目的,并不意味着本站赞同其观点或证实其内容的真实性。仅作为临时的测试数据,供内部测试之用。本站并未授权任何人以任何方式主动获取本站任何信息。

② 本站未注明“稿件来源”的临时测试数据将在测试完成后最终做删除处理。有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341

MySQL中怎么有效的删除一个大表

下载Word文档到电脑,方便收藏和打印~

下载Word文档

猜你喜欢

mysql中怎么删除表中一个数据

mysql 中使用 delete 语句删除表一行数据,语法为 delete from table_name where condition;步骤包括:指定要删除数据的表,指定删除条件,执行语句。MySQL 中删除表中一行数据在 MySQL
mysql中怎么删除表中一个数据
2024-05-01

mysql中删除一个表的命令

mysql 中删除表命令:drop table。语法:drop table table_name。用法:1. 连接数据库;2. 输入命令:drop table table_name;3. 执行命令。注意:删除前需删除表中数据;删除后数据将永
mysql中删除一个表的命令
2024-04-29

mysql中删除一个表的命令是

mysql 中删除表使用 drop table 命令。该命令会永久删除表及其数据,使用前应备份数据。删除表之前,需删除外键约束和引用该表的其他对象。MySQL 中删除表DROP TABLE 命令用于删除 MySQL 数据库中的表。语法:
mysql中删除一个表的命令是
2024-05-02

oracle中怎么删除一个表的字段

在 oracle 中删除表的字段需要以下步骤:确定要删除的字段。使用 alter table table_name drop column column_name 语句。提交更改。删除字段后,不会恢复,需检查并调整依赖项。如何在 Oracl
oracle中怎么删除一个表的字段
2024-05-03

MySQL怎么删除表中个别数据

要删除表中的个别数据,可以使用DELETE语句。语法如下:DELETE FROM table_name WHERE condition;其中,table_name是要删除数据的表名,condition是要满足的条件。例如,要删除表中id
MySQL怎么删除表中个别数据
2024-05-21

mysql怎么删除所有表

使用 mysql 删除所有表:1. 连接到数据库。2. 执行 drop table 命令,指定要删除的表名称。3. 运行 show tables 命令确认删除。如何使用 MySQL 删除所有表第一步:连接到 MySQL 数据库使用您的终
mysql怎么删除所有表
2024-05-22

oracle怎么删除一个表的主键

要删除一个表的主键,可以使用以下步骤:首先,使用以下语法查看表的主键名称:SELECT constraint_nameFROM user_constraintsWHERE table_name = your_table_name AN
oracle怎么删除一个表的主键
2024-03-12

sql中删除一个表的语句

sql 中删除表的语句是 drop table table_name,其中 table_name 是要删除的表的名称。例如,drop table customers 将删除名为 "customers" 的表。请注意,删除表会永久删除所有数据
sql中删除一个表的语句
2024-05-08

mysql怎么删除整个表数据

要删除整个表数据,可以使用DELETE语句,语法如下:DELETE FROM table_name;其中table_name是要删除数据的表名。执行以上语句将会删除该表中的所有数据,但不会删除表结构。如果需要删除表结构,可以使用DROP
mysql怎么删除整个表数据
2024-05-22

mysql怎么删除表中某个字段的数据

要删除表中某个字段的数据,可以使用DELETE语句。下面是一个示例:假设我们有一个名为users的表,其中有一个字段名为email,我们想要删除所有email字段中内容为example@example.com的数据,可以执行以下SQL语句
mysql怎么删除表中某个字段的数据
2024-04-09

Mysql怎么删除数据库表中的某一列

本篇内容主要讲解“Mysql怎么删除数据库表中的某一列”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“Mysql怎么删除数据库表中的某一列”吧!删除数据库表中的某一列删除某一字段的值update
2023-07-02

编程热搜

目录