mysql删除大表更快的办法

原文地址:http://ace105.blog.51cto.com/639741/1172724

mysql在对大表做DROP TABLE 过程中,所有操作都会被HANG住。

这是因为INNODB会维护一个全局独占锁(在table cache上面),直到DROP TABLE完成才释放。

在我们常用的ext3,ext4,ntfs文件系统,要删除一个大文件(几十G,甚至几百G)还是需要点时间的。

下面我们介绍一个快速DROP table 的方法; 不管多大的表,INNODB 都可以很快返回,表删除完成;

实现:巧用LINK(硬链接)

我们首先构建一张大表

mysql>create table aa as select * from SuperAgentWebSite;

Query OK, 5505 rows affected (1.75 sec)

Records: 5505  Duplicates: 0  Warnings: 0

mysql>insert into aa select * from aa ;

Query OK, 5505 rows affected (1.60 sec)

Records: 5505  Duplicates: 0  Warnings: 0

mysql>insert into aa select * from aa ;

Query OK, 11010 rows affected (3.91 sec)

Records: 11010  Duplicates: 0  Warnings: 0

mysql>insert into aa select * from aa ;

Query OK, 22020 rows affected (8.02 sec)

Records: 22020  Duplicates: 0  Warnings: 0

mysql>insert into aa select * from aa ;

Query OK, 44040 rows affected (16.36 sec)

Records: 44040  Duplicates: 0  Warnings: 0

mysql>insert into aa select * from aa ;

Query OK, 88080 rows affected (34.15 sec)

Records: 88080  Duplicates: 0  Warnings: 0

查看一下表的大小

[root@db15 test]# du -sh aa*

16K aa.frm

3.8G    aa.ibd

关键地方来了,对aa表做一个硬链接

[root@db15 test]# ln aa.ibd  aa.hdlk

这个时候发现本身mysql的aa.ibd文件变小了。文件存贮到了我们的硬链接文件上。

[root@db15 test]# du -sh aa*

16K aa.frm

3.8G    aa.hdlk

删除aa表,我们发现瞬间就搞定了。

mysql>drop table aa;

Query OK, 0 rows affected (0.33 sec)

最后去硬链接目录下面把我们的硬链接数据文件aa.hdlk删除掉。 我们发现上面删除表的droptableaa; 只是删除了aa.frm文件。

[root@db15 test]# rm -rfv aa*

已删除“aa.hdlk”

虽然DROP TABLE 多绕了几步。(如果你有一个比较可靠的自运行程序(自动为大表建立硬链接,并会自动删除过期的硬链接文件),就会显得不那么繁琐。)

这样做能大大减少MYSQL HANG住的时间; 相信还是值得的。

至于原理: 就是利用OS HARD LINK的原理,

当多个文件名同时指向同一个INODE时,这个INODE的引用数N>1, 删除其中任何一个文件名都会很快.

因为其直接的物理文件块没有被删除.只是删除了一个指针而已;

当INODE的引用数N=1时, 删除文件需要去把这个文件相关的所有数据块清除,所以会比较耗时;

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 204,793评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 87,567评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 151,342评论 0 338
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,825评论 1 277
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,814评论 5 368
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,680评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,033评论 3 399
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,687评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 42,175评论 1 300
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,668评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,775评论 1 332
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,419评论 4 321
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,020评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,978评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,206评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,092评论 2 351
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,510评论 2 343

推荐阅读更多精彩内容

  • 什么是数据库? 数据库是存储数据的集合的单独的应用程序。每个数据库具有一个或多个不同的API,用于创建,访问,管理...
    chen_000阅读 4,028评论 0 19
  • MySQL 数据库常用命令 1、MySQL常用命令 create database name; 创建数据库 use...
    55lover阅读 4,770评论 1 57
  • 1、数据库(database)管理 1.1 create 创建数据库 1.2 show 查看所有数据库 1.3 a...
    七秒浮屠阅读 753评论 0 3
  • 一,什么是数据库分区前段时间写过一篇关于mysql分表的的文章,下面来说一下什么是数据库分区,以mysql为例。m...
    MrKai平凡之路阅读 1,155评论 0 5
  • 元旦 跨年 我在南 你在北 很久没有这样的感觉 心里甚是想念 很幸运 当初遇见你 很庆幸 后来选择你 以后的路 不...
    花妖的尾巴阅读 124评论 3 2