首页
学习
活动
专区
圈层
工具
发布

MySQL——如何快速删除大表

前言 线上有一个表,大小为24G左右,没有什么重要的数据,却一直没有优化,导致业务无法进行,在此环境上,所以我们开始了删除之路 步骤 复制表 我这里使用Navicat工具直接复制表,选择仅结构即可。...创建硬链接 如果不知道自己的存储位置,可使用show variables like "datadir";查看自己的数据存储位置。...ln instruction.frm instruction.frm.bak ln instruction.ibd instruction.ibd.bak 删除表 DROP TABLE "表格名";...24G的数据删除大概用了15秒左右 修改表名 将我们刚才复制的表,表名修改为线上正常使用的表名即可。...删除物理文件 切记大的物理文件不可直接删除,直接操作会导致磁盘IO和CPU利用率升高,影响线上业务可使用truncate来进行删除操作。

3.1K10

快速安全删除MySQL大表

删除表相关的磁盘文件 二、创建硬链接 三、删除表 四、删除文件释放空间 参考: ---- 在一个高负载的生产数据库上删除大表需要一些技巧,倘若直接drop table,将产生大量磁盘I/...当我们删除任何一个文件的时候,都不会影响真实的存储文件,只是会将其引用数据减1,只有当被引用数目变为1时,再次删除文件,才会真正被删除。...498115543040 Oct 7 17:14 t1.ibd -rw-rw---- 2 mysql mysql 498115543040 Oct 7 17:14 t1.ibd.h 再删除表时,只是删除了...可以使用以下脚本对一个数据库内的所有表创建硬链接: # MySQL数据目录 datadir=`mysql -uroot -p123456 -S /data/mysqldata/mysql.sock -e.../bin/bash # 表定义文件很小,可直接删除 rm $1.frm.h # 表数据文件大小,单位M filesize=`ls -l $1.ibd.h | awk '{print int($5/1024

7.4K50
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    Innodb中MySQL如何快速删除2T的大表

    共享表空间:某一个数据库的所有的表数据,索引文件全部放在一个文件中,默认这个共享表空间的文件路径在data目录下。 默认的文件名为:ibdata1(此文件,可以扩展成多个)。....frm文件:保存了每个表的元数据,包括表结构的定义等,该文件与数据库引擎无关。 .ibd文件:保存了每个表的数据和索引的文件。...ps:my.cnf中的datadir就是用来设置数据存储目录 好了,上面巴拉巴拉了一大堆,我只想说一个事情: 在绝大部分情况下,运维一定会为mysql选择独立表空间的存储方式,因为采用独立表空间的方式,...现在就是erp.ibd文件太大,所以删除卡住了。 如何解决这个问题呢? 这里需要利用了linux中硬链接的知识,来进行快速删除。...那么,这时的删除,已经把table从mysql中删除。但是磁盘空间,还没释放,因为还剩一个文件erp.ibd.hdlk。 如何正确的删除erp.ibd.hdlk呢?

    4.1K20

    安全快速地删除 MySQL 大表数据并释放空间

    一、需求 按业务逻辑删除大量表数据 操作不卡库,不能影响正常业务操作 操作不能造成 60 秒以上的复制延迟 满足以上条件的前提下,尽快删除数据并释放所占空间         表结构如下: create...;         表中现有约 50 亿条数据,只保留 2023-10-01 以后的数据(约占总量的 1/10),其它删除。...主库按原表创建删除关联表,只保留原表的主键 mysql -uwxy -p123456 -h10.10.10.1 -P18251 -Dspace -e " create table del (   userid.../bin/bash source ~/.bashrc dir="/data/" ls $dir | while read line do     file=${dir}${line}     # 表关联删除数据...,分析原表,删除关联表 mysql -wxy -p123456 -h10.10.10.1 -P18251 -Dspace -e "     analyze table space_visit_av;

    1.9K10

    如何快速删除InnoDB中的大表?

    背景 在使用MySQL时,如果有大表的存储引擎是InnoDB,并且系统参数innodb_file_per_table设置为1,即每个文件对应一个独立的表空间,当对这些大表进行DROP TABLE时,有时会发现整个数据库系统的性能会有显著下降...,包括一些只涉及几行数据的简单SELECT查询和DML语句,而且这些语句和正在删除的大表没有关系。...对其他语句的影响; 对于IO问题,删除表之前对ibd文件手动创建一个硬链接,让DROP TABLE可以快速执行结束,等到低峰期再真正从磁盘上删除文件; 4.2 改动源码方案 考虑在unlink文件前释放...,数据字典里已经没有这个表了,但是磁盘上还存在ibd文件;这个问题一方面会导致磁盘空间的浪费,另外一方面会导致CREATE TABLE失败,如果表名和之前删除的表名一样。...过程调整为: 获取dict_sys->mutex这个数据字典锁 启动一个innodb事务 更新数据字典,包括内存中的数据和mysql库下的数据字典表 lazy drop逻辑,清理buffer pool的

    11.2K32

    Mysql删除表数据,表文件大小不变

    首先明确一个概念,innodb表包含两部分,表结构定义和数据,Mysql8.0以前表结构定义存放在.frm为后缀的文件里,而Mysql8.0版本以后允许表结构定义放到系统数据表中,因为表结构定义占用的空间很小...,Mysql5.6.6以后默认就是ON 无论使用哪个版本我们都建议把这个值设置成ON,单独放到一个文件,方便管理,当我们不需要这个表的时候,通过drop table 就可以直接删除这个文件。...如果放到系统共享表空间中,即使删除掉了,空间也就是不会回收的 数据删除流程 ?...总之,经过大量的增删改的表都可能存在空洞,所以,如果能把这些空洞去掉,就能达到收缩表空间的目的,而重建表,就可以达到这样的目的 重建表 试想一下,如果我们需要去掉这些空洞,如何做呢,当然你可以建立一个和...我们可以使用下面命令重建表,在mysql5.5版本之前,这个命令的执行流程跟我们前面描述的差不多,区别就是这个临时表B不需要手动创建,MySql会自动完成转存数据,就换表明,删除旧表的操作 ?

    7K10

    MySQL如何删除#sql开头的临时表

    注意: 此类表空间文件不能直接rm -f的方式物理删除,因为该信息记录在ibdata的共享表空间里,直接删除后,后续实例重启时会出现错误。 3....但注意删除时候表名的变化。.../* 直接删除,表名前加#mysql50 */ root@testdb 01:42:57> DROP TABLE `#mysql50##sql-ib87-856498050`; 注:#mysql50#...3.2 创建新表方式删除 因为本例中没有存在.frm 和.ibd名称相同的文件的情况,因此采用创建一张与ibd表空间对应的结构(字段名及索引)一致的表,然后将frm文件拷贝为和ibd一致的文件,再进行删除...因为上一步拷贝时使用-p的方式,即权限和原文件权限一致,属主及group均为mysql,因此可以直接在数据库里读取删除,如果权限不对,必须先修改文件权限。

    7.6K20

    清空表与删除表mysql

    Mysql清空表(truncate)与删除表中数据(delete)的区别 为某基于wordpress搭建的博客长久未除草,某天升级的时候发现已经被插入了几万条垃圾留言,如果一条条删除那可真是累人的活。...遂考虑直接进入mysql直接清空表或者删除表中数据。 本文记录一下这2种操作模式的区别,目标对象是表wp_comments,里面的所有留言均是垃圾留言,均可删除。...然后便有了以下2种方式(进入mysql操作界面后): truncate table wp_comments; delete * from wp_comments; 其中truncate操作中的table...这两者都是将wp_comments表中数据清空,不过也是有区别的,如下: truncate是整体删除(速度较快), delete是逐条删除(速度较慢)。...而delete删除以后,Identity依旧是接着被删除的最近的那一条记录ID加1后进行记录。 如果只需删除表中的部分记录,只能使用DELETE语句配合where条件。

    11.9K20

    删除MySQL表中的重复数据?

    前言一般我们将数据存储在MySQL数据库中,它允许我们存储重复的数据。但是往往重复的数据是作废的、没有用的数据,那么通常我们会使用数据库的唯一索引 unique 键作为限制。...问题来了啊,我还没有创建唯一索引捏,数据就重复了(我就是忘了,怎么滴)。 那么如何在一个普通的数据库表中删除重复的数据呢?那我用一个例子演示一下如何操作。。。...中最小的自增主键 id令要删除的数据 iccId 控制在 1....和 不等于 2.中同时删除空的业务主键数据那么便有以下几个查询:/*1、查询表中有重复数据的主键*/select rd2.iccId from flow_card_renewal_comparing rd2...做删除的时候会提示不能用查询的结果来做删除操作,这个时候就需要将查询的数据作为一个临时表,起别名进行删除啦。

    11.1K10

    MySQL删除表数据、清空表命令(truncate、drop、delete 区别)

    一、MySQL清空表数据三种方法1.1 清空表数据:truncatesql命令#清空多张表、库中所有表的数据truncate table table_name1,table_name2,......、多行、乃至整张表每次删除一行,都在事务日志中为所删除的每行记录一项,可回滚如果不加where条件,表示删除表中所有数据,仅删除数据、保留表结构,同时也不释放表空间MySQL、Mariadb、PostgreSQL...drop:删除整个表,包括表结构和数据,释放空间。它是一种DDL操作,但不同于truncate,它会释放表所占用的空间。数据删除方式:truncate:删除表中的所有数据,但不会删除表结构。...适用于需要保留表结构的情况。delete:删除表中的特定数据,可以根据条件删除,表的结构和约束保持不变。适用于需要根据特定条件删除数据的情况。drop:删除整个表,包括表结构和数据。...drop:不会触发触发器,因为它是删除整个表。总结:如果您需要快速删除整个表中的数据,但保留表结构,可以选择truncate。如果您需要删除特定行的数据,可以根据条件删除,可以选择delete。

    70.8K67

    MYSQL删除大数据表经验总结

    ,作为运维发生问题,第一时间先以解决问题为第一位,所以这里总结一下删除大表数据的经验。...方法1:重建表 数据较大直接通过where条件进行delete操作肯定不行,加索引的话也不行。MYSQL上delete加low_priorty,quick,ignore估计也帮助不大。...方法2:拆分SQL执行 拆分SQL执行就是把需要删除的数据做在线删除,单独按照条件做删除的话会造成锁表的情况,会导致数据丢失的情况,所以我们可以把需要删除的数据把ID查询出来,然后循环ID列表逐渐删除...总结 如上三种方式切换主从是我最推荐的,我线上最终也是决定切换主从来解决大数据表数据删除的问题,因为数据越大方法1、2时间都会较长,而且还有丢失数据的风险。...后面准备针对这个大表做定期数据规定或者写脚本做定期删除操作,但是删除后表优化的情况我们后面讨论。

    2.9K20

    ②【MySQL表操作】 数据库表的创建、查询、修改、删除

    修改、删除 1....数据类型 数据库表中的数据类型: 数值类型: TINYINT:小整数 SMALLINT:大整数 MEDIUMINT:大整数,范围大于SMALLINT INT/INTEGER:大整数,范围大于MEDIUMINT...DDL - 表操作 DDL-表操作: 查询表信息 ①查询当前数据库所有表 SHOW TABLES; ②查询表结构 DESC 表名; ③查询指定表的建表语句 SHOW CREATE TABLE 表名; 创建表操作...删除 ALTER TABLE tb_emp DROP username; ④修改表名 ALTER TABLE 表名 RENAME TO 新表名; 删除表操作: ①删除表 DROP TABLE [IF EXISTS...IF EXISTS -- 当要被删除表不存在时,不会再删除,也不会报错 DROP TABLE IF EXISTS aaa; ②删除指定表,并重新创建该表 TRUNCATE TABLE 表名;

    5K50

    【腾讯云CDB】如何快速删除InnoDB中的大表

    背景 在使用MySQL时,如果有大表的存储引擎是InnoDB,并且系统参数innodb_file_per_table设置为1,即每个文件对应一个独立的表空间,当对这些大表进行DROP TABLE时,有时会发现整个数据库系统的性能会有显著下降...,包括一些只涉及几行数据的简单SELECT查询和DML语句,而且这些语句和正在删除的大表没有关系。...在删除一个有独立表空间的大表时,需要对buffer pool中所有和这个表空间有关的数据页做清理工作,包括从AHI,flush list和LRU list上移除,而在这个清理过程中,会一直持有buffer...对其他语句的影响; 对于IO问题,删除表之前对ibd文件手动创建一个硬链接,让DROP TABLE可以快速执行结束,等到低峰期再真正从磁盘上删除文件; 4.2 改动源码方案 考虑在unlink文件前释放...,数据字典里已经没有这个表了,但是磁盘上还存在ibd文件;这个问题一方面会导致磁盘空间的浪费,另外一方面会导致CREATE TABLE失败,如果表名和之前删除的表名一样。

    5.1K21
    领券