Loading [MathJax]/jax/output/CommonHTML/config.js
前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >专栏 >mysqldump详解

mysqldump详解

作者头像
GreatSQL社区
发布于 2023-08-10 13:31:17
发布于 2023-08-10 13:31:17
78200
代码可运行
举报
运行总次数:0
代码可运行

* GreatSQL社区原创内容未经授权不得随意使用,转载请联系小编并注明来源。

在进行数据库备份的时候主要分为了逻辑备份和物理备份这两种方式。在数据迁移和备份恢复中使用mysqldump将数据生成sql进行保存是最常用的方式之一。

本文将围绕着mysqldump的使用,工作原理,以及对于InnoDB和MyISAM两种不同引擎如何实现数据一致性这三个方面进行介绍。

一.mysqldump 简介

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
mysqldump是MySQL自带的逻辑备份工具。
它的备份原理是通过协议连接到 MySQL数据库,将需要备份的数据查询出来,
将查询出的数据转换成对应的insert语句,当我们需要还原这些数据时,
只要执行这些insert语句,即可将对应的数据还原。

二.备份的命令

2.1命令的格式
代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
1.mysqldump [选项] 数据库名 [表名] > 脚本名
2.mysqldump [选项] --数据库名 [选项 表名] > 脚本名
3.mysqldump [选项] --all-databases [选项]  > 脚本名
2.2选项说明

参数名

缩写

含义

--host

-h

服务器IP地址

--port

-P

服务器端口号

--user

-u

MySQL 用户名

--pasword

-p

MySQL 密码

--databases

指定要备份的数据库

--all-databases

备份mysql服务器上的所有数据库

--compact

压缩模式,产生更少的输出

--comments

添加注释信息

--complete-insert

输出完成的插入语句

--lock-tables

备份前,锁定所有数据库表

--no-create-db/--no-create-info

禁止生成创建数据库语句

--force

当出现错误时仍然继续备份操作

--default-character-set

指定默认字符集

--add-locks

备份数据库表时锁定数据库表

三.还原的命令

3.1系统行命令
代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
mysqladmin -uroot -p create db_name 
mysql -uroot -p  db_name < /backup/mysqldump/db_name.db

注:在导入备份数据库前,db_name如果没有,是需要创建的; 而且与db_name.db中数据库名是一样的才可以导入。
3.2source方式
代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
mysql > use db_name;
mysql > source /backup/mysqldump/db_name.db;

四.mysqldump实现的原理

4.1备份流程如下
代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
1.调用FWRL(flush tables with read lock),全局禁止读写
2.开启快照读,获取此期间的快照(仅仅对innodb起作用)
3.备份非innodb表数据(*.frm,*.myi,*.myd等)
4.非innodb表备份完毕之后,释放FTWRL
5.逐一备份innodb表数据
6.备份完成
4.2执行mysqldump,分析备份日志
代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
#  执行语句
[root@localhost backup]# mysqldump -uroot -proot -h127.0.0.1 --all-databases --single-transaction --routines --events --triggers --master-data=2 --hex-blob --default-character-set=utf8mb4 --flush-logs --quick > all.sql
mysqldump: [Warning] Using a password on the command line interface can be insecure.
代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
[root@localhost ~]# tail -f  /var/lib/mysql/localhost.log
第一步:
  FLUSH /*!40101 LOCAL */ TABLES
# 这里是刷新表


第二步:
  FLUSH TABLES WITH READ LOCK
# 因为开启了--master-data=2,这时就需要flush tables with read lock锁住全库,
  记录当时的master_log_file和master_log_pos点
  这里有一个疑问?
  执行flush tables操作,并加一个全局读锁,那么以上两个命令貌似是重复的,
  为什么不在第一次执行flush tables操作的时候加上锁呢?
  简而言之,是为了避免较长的事务操作造成FLUSH TABLES WITH READ LOCK操作迟迟得不到
  锁,但同时又阻塞了其它客户端操作。
  
  
第三步:
  SET SESSION TRANSACTION ISOLATION LEVEL REPEATABLE READ
#  --single-transaction参数的作用,设置事务的隔离级别为可重复读,
  即REPEATABLE READ,这样能保证在一个事务中所有相同的查询读取到同样的数据,
  也就大概保证了在dump期间,如果其他innodb引擎的线程修改了表的数据并提交,
  对该dump线程的数据并无影响,然而这个还不够,还需要看下一条


第四步:
  START TRANSACTION /*!40100 WITH CONSISTENT SNAPSHOT */
# 获取当前数据库的快照,这个是由mysqldump中--single-transaction决定的。
# WITH CONSISTENT SNAPSHOT能够保证在事务开启的时候,第一次查询的结果就是
  事务开始时的数据A,即使这时其他线程将其数据修改为B,查的结果依然是A。简而言之,就是开启事务并对所有表执行了一次SELECT操作,这样可保证备份时,
  在任意时间点执行select * from table得到的数据和
  执行START TRANSACTION WITH CONSISTENT SNAPSHOT时的数据一致。
 【注意】,WITH CONSISTENT SNAPSHOT只在RR隔离级别下有效。

第五步:
  SHOW MASTER STATUS
# 这个是由--master-data决定的,记录了开始备份时,binlog的状态信息,
  包括MASTER_LOG_FILEMASTER_LOG_POS

这里需要特别区分一下master-data和dump-slave
master-data:
--master-data=2表示在dump过程中记录主库的binlog和pos点,并在dump文件中注释掉这一行;
--master-data=1表示在dump过程中记录主库的binlog和pos点,并在dump文件中不注释掉这一行,即恢复时会执行;
dump-slave
--dump-slave=2表示在dump过程中,在从库dump,mysqldump进程也要在从库执行,
  记录当时主库的binlog和pos点,并在dump文件中注释掉这一行;
--dump-slave=1表示在dump过程中,在从库dump,mysqldump进程也要在从库执行,
  记录当时主库的binlog和pos点,并在dump文件中不注释掉这一行;
 
第六步:
  UNLOCK TABLES
# 释放锁。

五.mysqldump对InnoDB和MyISAM两种存储引擎进行备份的差异。

5.1对于支持事务的引擎如InnoDB,参数上是在备份的时候加上 –single-transaction 保证数据一致性
代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
–single-transaction 实际上通过做了下面两个操作 :

① 在开始的时候把该 session 的事务隔离级别设置成 repeatable read ;

② 然后启动一个事务(执行 begin ),备份结束的时候结束该事务(执行 commit )

有了这两个操作,在备份过程中,该 session 读到的数据都是启动备份时的数据(同一个点)。可以理解为对于 InnoDB 引擎来说加了该参数,备份开始时就已经把要备份的数据定下来了,
备份过程中的提交的事务时是看不到的,也不会备份进去。

5.2对于不支持事务的引擎如MyISAM,只能通过锁表来保证数据一致性,这里分两种情况:
代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
1)导出全库:加 –lock-all-tables 参数,这会在备份开始的时候启动一个全局读锁 
  (执行 flush tables with read lock),其他 session 可以读取但不能更新数据,
   备份过程中数据没有变化,所以最终得到的数据肯定是完全一致的;

2)导出单个库:加 –lock-tables 参数,这会在备份开始的时候锁该库的所有表,
   其他 session 可以读但不能更新该库的所有表,该库的数据一致;

Enjoy GreatSQL :)

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2023-03-25,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 GreatSQL社区 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
暂无评论
推荐阅读
编辑精选文章
换一批
美国“死神”无人机发展经费投入分析
2015年10月12日,美国巴德学院无人机研究中心发表文章,剖析了美国“死神”无人机(MQ-9 Reaper)发展经费的投入情况。 死神无人机是一种中海拔长航时无人机,可用于侦察与打击。通用原子航空系统公司作为该无人机项目的总承包商,负责制造无人机和地面控制系统。其他承包商包括雷神公司(提供一些先进无人机传感器)和L-3通信公司(提供训练模拟器和卫星通信基础设施)。美国空军(USAF)是美国政府方面接收死神无人机的主要单位,其他军事部门如美国导弹防御局和特种作战司令部(USSOCOM)也为死神无人机的采购和
人工智能快报
2018/03/07
9880
「体育大数据」职业体育大数据应用之橄榄球
从高尔夫到网球,从橄榄球到足球,数据分析如今正席卷职业体育界。每次击球, 每次挥杆都可能会影响整场比赛的结果。 运动员和球队如今越来越依靠数据分析来使他们更快更强。 新技术如传感器以及3D多普勒雷达等,可以跟踪运动员的表现, 使得运动员能够更好的了解和分析自己的运动。 “这并不奇怪。”哈佛大学定量社会科学研究院的主任Gary King说,“如果你总结一下那些数据分析能够起到巨大作用的行业的特点, 你就会发现, 职业体育行业基本具备了这些特点,这也就是为什么数据分析在职业体育中具有如此重要的作用的原因。” 职
大数据文摘
2018/05/22
9630
美国国防部与CMU合作发布AI挑战赛,用卫星图评估受灾情况
当灾难来袭时,速度至关重要。生与死的差异就取决于对灾难后续破坏力正确评估所花费的时间。
大数据文摘
2019/10/10
7540
美国国防部与CMU合作发布AI挑战赛,用卫星图评估受灾情况
《国家级文化生态保护区管理办法》印发 | 每周文旅资讯精选(3.18-3.24)
中国旅游协会文化体育旅游分会在京成立 打造成行业发展服务平台 近日,中国旅游协会文化体育旅游分会成立大会暨第一届会员大会在京召开。 会上审议通过了《中国旅游协会文化体育旅游分会管理办法》《会费标准暨管理办法》《领导机构选举办法及程序》,同时选举产生了第一届理事会。 新当选的分会负责人表示,中国旅游协会文化体育旅游分会将成立“文化体育旅游发展智库”和“文化体育旅游规划标准研究中心”。 通过开展大众体育和文化旅游活动,引导红色文化旅游、乡村旅游、体育赛事旅游等业态融合发展,研究和制定行业规划标准。
腾讯文旅
2020/06/17
4130
号称“高薪、转型、改变命运” ,纽约时报曝光煤矿工地上的编程“速成班”
尤其是最近爆火的大数据和人工智能,因为人才需求逐渐增大,各大高校“科班”输出的人才满足不了行业需求。
大数据文摘
2019/05/17
4930
从飞行器到光学研究:2017年 Wolfram 创新者奖名单公布
█ 本文译自技术文档撰写人 Jesse Dohmann 于2017年11月2日的博客文章:From Aircraft to Optics : Wolfram Innovator Awards 2017
WolframChina
2018/05/31
4630
假如拥有超级算力可以做些什么?
美国防部利用强大的安全算力,增强美军数字化作战能力以及在网络空间的主权,为应对当前以及未来多变的信息化战场积蓄力量。 一个偶然机会,在知乎上翻到了这样一个帖子:如果黑客拥有一台算力无限的主机,他能做什么? 虽说这种科幻设想的无限算力属于电影情节,但是国家或团体组织拥有强大的算力资源,这件事并不科幻。 看到下边网友的各种回复,确实脑洞大开,思路清奇。 很多人第一反应是去挖矿,去修改区块链账本,反方观点则是这样就破坏了区块链本身具有的不可篡改的属性,自然到时虚拟货币将一文不值; 有的大佬表示要干点大事,可以搞
FB客服
2023/03/30
1K0
假如拥有超级算力可以做些什么?
希拉里PK川普激战正酣,看看黑客如何“干预”美国总统大选
昨天的美国大选第二轮辩论,相信大家都有所耳闻,撕得那是一个风生水起,好生热闹!不过今年除了两位总统候选人备受关注之外,黑客攻击干扰大选的新闻也是屡屡见诸报端,引发了激烈的讨论。 美国大选流程 在谈黑客
FB客服
2018/02/09
9420
希拉里PK川普激战正酣,看看黑客如何“干预”美国总统大选
2023年美国网络攻防演练与政策分析
网络空间与现实世界融合渗透、持续深化使得关键信息基础设施逐渐成为各国网络空间安全博弈的重要目标,加强网络实战演练成为欧美主要国家提升安全能力的重要举措。
FB客服
2023/10/06
1.6K0
2023年美国网络攻防演练与政策分析
惩罚中兴,审查华为,美国管理数字世界的权力受威胁
新智元报道 编辑:闻菲、克雷格 【新智元导读】中兴事件尚未平息,美国又开始盯上谷歌与华为的关系。一系列打击虽然展现了美国的威慑实力,但也反映出美国的统治地位正在消失。中兴和华为事件是警醒,更是中国
新智元
2018/06/22
4120
【董天一】Filecoin2017年Q4进度更新(完整版)
自从Token销售完成以后,我们便开始集中精力把Filecoin项目从设想变为现实-从实现Filecoin协议的核心代码到打造我们优秀的团队。下面是来自于我们团队的进度更新,以及一些我们期望您和社区来参与的工作。
圆方圆学院
2019/03/14
5050
【董天一】Filecoin2017年Q4进度更新(完整版)
靶场发展态势⑦持续网络训练环境(PCTE)1
随着美国对网络战的政策及顶层设计越来越清晰,美军继续构建网络任务部队(Cyber MissionForce, CMF)并将专业的网络军团制度化,美国开始着手进行网络(赛博)空间作战培训平台的规划建设工作。网络空间作战培训平台强调持续网络训练环境(PersistentTraining Environment,缩写PTE)的概念,虽然美国网络司令部每年都会举办大规模的演习,比如“网络卫士”和“网络夺旗”项目,但已无法满足美军网络任务部队的网络作战试验演训需求。根据美国国防部规划的内容,“持续网络训练环境(PCTE)将为国防部(DoD)网络任务部队提供标准化的培训能力,使他们能够访问现有的网络培训靶场(CTR)以及可用的培训资源和内容。当前环境没有能力维持持久性环境,并且主要用于大型演习(例如,Cyber Flag)。服务网络组件已经建立了自己的培训环境,但是没有标准化的功能或内容。2015年11月17日,PCTE系统方法与国防部负责采购、技术和物流的副部长办公室(OUSD AT&L)的输出以及由参谋长联席会议主席(CJCS)J6领导的“替代方案的网络靶场评估(EOA)”结果和议题文件审议”。计划、模拟、培训和仪器仪表执行办公室(PEO STRI)被指定为PCTE的国防部采购负责人。该计划由2016年《国防授权法》第1645条所指示。根据PCTE执行委员会制定的IOC定义、原型、集成和测试工作将在2019财年完成,以达到初始作战能力(IOC)所需的能力。”美国国防部于2016年邀请美国陆军负责领导网络持续训练环境(PersistentTraining Environment,PTE)的项目开发工作,以帮助在实时虚拟环境中培训来自美国网络司令部的网络任务部队(CMF)。这个项目就是至NCR项目之后美国国防部又一重量级的网络空间靶场建设项目--持续赛博训练环境(Persistent Cyber Training Environment,PCTE)。目前该项目由美陆军模拟、培训和仪器计划执行办公室(PEOSTRI)管理。
时间之外沉浮事
2019/12/18
2.1K0
扎克伯格发6千字长文,谈Facebook未来愿景和世界该有的样子
本文来源:凤凰科技、网易科技 据美联社报道,昨日,Facebook CEO扎克伯格发表了一篇长达6000字的宣言,从宣言内容来看,它更像是一篇乌托邦式的社会指南,而非社交巨头的商业企划书。在这份宣言中,他问道:“我们真的在努力打造大家都满意的世界了吗?” 眼下,大多数人用Facebook与家人和朋友保持联系,不过扎克伯格希望鼓励更多公民参与,将Facebook打造成一个公共空间。如今,Facebook活跃用户已经接近20亿,它比任何一个国家人口都要多。 在宣言中,扎克伯格开篇明义反对美国正在兴起的孤立主义和
大数据文摘
2018/05/25
6170
美空军网络空间训练靶场(SIMTEX)
上述小节总结美军联合网络空间作战靶场(Joint CyberOperation Range,JCOR)的大体发展情况,美军联合网络空间作战靶场(Joint CyberOperation Range,JCOR)主要由空军模拟器(SIMTEX)、海军网络空间作战靶场(NCOR)、陆军国民警卫队模拟器(ARGENTS)、美军战略司令部模拟器(SCOR)等组成,本小节将详细介绍美空军模拟器(SIMTEX)的技术组成情况。
时间之外沉浮事
2019/11/14
2.7K0
美空军网络空间训练靶场(SIMTEX)
重构区块链
撰写这篇手册,并不简单的因为区块链是一个热门话题,更因为随着研究的深入,你会发现这是一个相当复杂的领域。关于这一话题的信息来源无外乎三个方面:技术文档和代码,商业机构的宣传,研究机构或个人的整理。但是每一种媒体都因其形式、渠道或作者而带有某种偏见。技术文档固然详细精确,但是不够通俗,视野也不够广阔;商业宣传必定带有一定的偏向性;而看似中立的研究机构和媒体也因其背后资助方或者受众市场的差异而显现出意识形态的不同。区块链领域的技术人员喜欢强调其技术领先性,但偏偏这一领域在学术界还没有一致的评判标准。区块链商业机构流行的白皮书,只有极少数既保留了技术细节,又蕴含对整个体系的理解。媒体和研究机构里则存在一种悖论,那些对区块链理解不够深,但是想象力丰富的人,率先推出了所谓的畅销书,只能让普通人初步理解一些浅层的知识,无法用来灵活运用和价值创造。只有那些深入区块链一线的研究员才会意识到,这个领域还处在高速变化期,很多东西都没有定性,出书立著为时尚早。
全栈程序员站长
2022/07/23
9.9K0
重构区块链
域名后缀大全,上千个域名类型说明
在域名产生之前,访问网站都是填写IP,后来需要的IP的网站越来越多,再加上IP又不方便记忆,就产生了域名(domain name),可以实现同一服务器IP多个网站共用,其间,通过DNS域名解析服务,负责将域名解析为IP。
^夜猫^
2023/11/28
2.4K0
《纽约客》:还原真实的扎克伯格
本文作者欧逸文(Evan Osnos)是《纽约客》驻华记者,曾获得2008年普利策奖。文章由公众号“新闻别动队”韩巍翻译。
AI科技大本营
2018/10/22
1.4K0
十年磨一剑!万字长文剖析华为方舟编译器的前世今生
2017年5月的一个凌晨,华为某实验室里,方舟编译器上第一个Java程序“Hello, World”跑通了。
新智元
2019/08/09
1.4K0
十年磨一剑!万字长文剖析华为方舟编译器的前世今生
Jeff Dean三执笔:一文看尽2020年谷歌AI重大突破
在二十年前刚刚加入谷歌时,我们关注的问题只有一个——如何面向这么多不同种类的联网计算机提供一整套质量出色且涵盖范围全面的网络信息搜索服务。到如今,尽管我们面临着各种各样的技术挑战,但谷歌已经基本达成了组织全球信息,并使其具备普遍可访问性的总体目标。到 2020 年,随着 COVID-19 肆虐全球,我们意识到研发技术能够帮助全球数十亿人更好地交流、了解事态发展并找到新的工作方式。我为我们取得的成就感到自豪,也为即将出现的全新可能性感到振奋。
深度学习与Python
2021/02/05
4360
推荐阅读
相关推荐
美国“死神”无人机发展经费投入分析
更多 >
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档