Loading [MathJax]/jax/output/CommonHTML/config.js
前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
社区首页 >专栏 >postgresql从入门到精通教程 - 第36讲:postgresql逻辑备份

postgresql从入门到精通教程 - 第36讲:postgresql逻辑备份

原创
作者头像
用户5892232
发布于 2023-12-01 02:00:26
发布于 2023-12-01 02:00:26
4130
举报

PostgreSQL从小白到专家,是从入门逐渐能力提升的一个系列教程,内容包括对PG基础的认知、包括安装使用、包括角色权限、包括维护管理、、等内容,希望对热爱PG、学习PG的同学们有帮助,欢迎持续关注CUUG PG技术大讲堂。

第36讲:PostgreSQL逻辑备份

内容1:逻辑备份概述

内容2:pg_dump使用

内容3:pg_dumpall使用

内容4:copy使用

PG导出导入工具

PG导出导入概述

· 可以使用这些实用程序执行以下操作:

归档历史数据

保存表定义以防止用户出错

在计算机和数据库之间或PostgreSQL服务器的不同版本之间移动数据

在数据库之间传输数据

调用导出和导入程序的方法

命令行接口

其它管理工具

导出模式

· pg_dump只能备份单个数据库,不会导出角色和表空间相关的信息,而且恢复的时候需要创建空数据库。

· pg_dumpall可以备份所有数据库,并且备份角色、表空间。

-F c 备份为二进制格式, 压缩存储. 并且可被 pg_restore 用于精细还原。

-F p 备份为文本, 大库不推荐。

调用pg_dump

语法:

pg_dump [选项]... [数据库名字]

示例:

pg_dump testdb > testdb.sql

pg_dump -F c -f testdb.dmp -C -E UTF8 -h 127.0.0.1 -U postgres testdb

pg_dump -F p -f testdb.sql -C -E UTF8 -h 127.0.0.1 -U postgres testdb

逻辑恢复

· 恢复顺序

1.创建新表

2.导入数据

3.建立索引

4.触发器已导入

5.在新表上启用完整性约束

6.创建函数

· 恢复数据

文本格式备份恢复方式:

1、创建新数据库

CREATE DATABASE new_db1;

2、恢复数据

psql new_db1 < testdb.sql

二进制格式备份恢复方式:

1、创建新数据库

CREATE DATABASE new_db1;

2、恢复数据

pg_restore -d new_db1 testdb.dmp

二进制备份实现精细恢复

· 利用toc文件实现精细恢复

1、根据二进制备份文件生成 toc 文件

pg_restore -l -f testdb.toc testdb.dmp

2、修改 toc 文件,用‘;’号注释掉不用还原的内容

203; 1259 40996 TABLE public dept postgres

204; 1259 41001 TABLE public emp postgres

;202; 1259 16391 TABLE public t1 postgres

2840; 0 40996 TABLE DATA public dept postgres

2841; 0 41001 TABLE DATA public emp postgres

;2839; 0 16391 TABLE DATA public t1 postgres

3、以toc文件做恢复

pg_restore -F c -L testdb.toc -d testdb testdb.dmp

其它导出导入技巧

· 利用管道符实现各种导出导入

导出并且压缩

pg_dump testdb |gzip testdb.sql

解压并且导入,压缩文件不变,,导入到testdb数据库:

gunzip -c testdb.sql.gz |psql testdb

导出后直接进行恢复,文件不落地,把testdb数据库的表导入到testdb1:

pg_dump testdb| psql testdb1

并行导出与导入

pg_dump -Fd -j4 -f testdb.p.dump testdb

pg_restore -d testdb1 -j4 testdb.p.dump

其它备份恢复技巧

· 备份指定/排除的表

如果只想导出指定的表数据,可以使用-t参数,表名需要用两个双引号概括起来。

pg_dump -t ""departments"" -t ""employees"" testdb > testdb.sql

导出排除指定的表的数据库

pg_dump -d testdb -T ""emp"" > testdb_ex_emp.sql

使用pg_dump实现主机间数据库间迁移数据

· 文件不落地,实现数据库迁移

1、配置两个数据库之间的信任关系(必须)

host all all 192.168.18.0/24 trust

2、在数据库之间进行某个数据库迁移

pg_dump -h pg1 -p 1922 -U postgres testdb|psql -h pg2 -p 5432 -U postgres testdb

3、迁移所有的数据库到目标数据库

pg_dumpall -h pg1 -p 1922 -U postgres |psql -h pg2 -p 5432 -U postgres

注意:

1、PG数据库之间迁移无需配置dblink,只要指定主机名和端口即可。

2、由于用的是管道符,所以必须配置两个数据库远程登录信任关系。

3、迁移时两个数据库必须要有相同的表空间,需要提前创建。

copy概述

· 实现表与文件之间的交互

copy 命令用于数据库中表与操作系统文件(和标准输出、标准输入)之间的相互拷贝,可以由表至文件,也可以由文件至表。

使用copy实现数据库表和文本文件之间数据的迁移,非常方便,比Oracle的sqlloader易用性好。

copy语法

· 语法

文件到表

COPY table_name [ ( column ...] ) ]

FROM { 'filename' | command' | STDIN }

[ [ WITH ] ( option [, ] ) ]

表到文件

COPY { table_name column_name [, ...] ) ] | ( query ) }

TO { 'filename' | PROGRAM 'command' | STDOUT }

[ [ WITH ] ( option [, ...] ) ]

应用案例

· 文件到表

文件到表时,支持的文本内容格式有两种,一种是tab制表符作为分隔符(不是空格);一种是逗号做为分隔符。

tab键作为分隔符:

1 a

2 b

3 c

逗号作为分隔符:

1,a,"I am students"

2,b,"I am teacher"

3,c,"I am boss"

· 文件到表

文件到表时,支持的文本内容格式有两种,一种是tab制表符作为分隔符(不是空格);一种是逗号做为分隔符。

tab键作为分隔符:

\copy tab_name from /home/postgres/tab.txt;

逗号做为分隔符:

\copy tab_name from /home/postgres/tab.csv with csv;

· 表到文件

表到文件时,支持的文本内容格式有两种,一种是tab制表符作为分隔符(不是空格);一种是逗号做为分隔符。

tab键作为分隔符:

\copy tab_name to /home/postgres/tab.txt;

逗号做为分隔符:

\copy tab_name to /home/postgres/tab.csv with csv;

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

评论
登录后参与评论
暂无评论
推荐阅读
编辑精选文章
换一批
PostgreSQL 备份与恢复(第一章)
PostgreSQL官方文档指定了以下三种备份方法,详见:https://www.postgresql.org/docs/current/backup.html
DB之路
2021/07/14
9.8K0
PostgreSQL备份恢复实现
本文主要介绍pg_dump、pg_dumpall、copy、pg_basebackup的使用。
数据和云
2021/09/22
5.4K0
PostgreSQL备份恢复实现
从零开始学PostgreSQL-工具篇: 备份与恢复
PostgreSQL 提供了一系列强大的工具来备份和恢复数据库。这些工具包括 pg_dump, pg_restore,pg_dumpall,pg_basebackup。下面是这些工具的简要概述和一些注意事项:
DBA实战
2024/09/13
3670
从零开始学PostgreSQL-工具篇: 备份与恢复
笔记分享(4) Tbase/PostgreSQL 常用命令
分享一下之前用到的tbase/pg命令, 主要是和mysql/oracle差别太大了. 做个记录, 方便后面看.
大大刺猬
2021/05/17
3.2K0
记录一下PostgreSQL的备份和还原
pg_dump是用于备份一种PostgreSQL数据库的工具。即使数据库正在被并发使用,它也能创建一致的备份。pg_dump不阻塞其他用户访问数据库(读取或写入)。
python与大数据分析
2023/03/02
1.7K0
记录一下PostgreSQL的备份和还原
从零开始学PostgreSQL (六): 备份和恢复
PostgreSQL 提供了多种备份和恢复策略,旨在满足不同规模和需求的数据库环境。以下是 PostgreSQL 备份和恢复的主要方法概览:
DBA实战
2024/09/06
4460
从零开始学PostgreSQL (六): 备份和恢复
数据库PostrageSQL-备份和恢复
由于包含着有价值的数据,PostgreSQL数据库应当被定期地备份。虽然过程相当简单,但清晰地理解其底层技术和假设是非常重要的。 有三种不同的基本方法来备份PostgreSQL数据:
cwl_java
2020/12/22
2.1K0
Postgresql 数据库导入导出 物理VS逻辑 集合
PostgreSQL 数据的导入导出本身并没有特别高的技术要求,属于日常操作,但熟悉导入导出以及选择数据导入导出的方式还是有点思考空间的。怎么导出数据的方式更稳妥,更适应业务的需求。下面就先总结数据导入导出中的数据导出的一部分方式和命令的实例,其中一些也是我在总结中发现的,例如COPY 的方式还可以有加速的方式,有时候觉得简单,和简单是两码事。
AustinDatabases
2021/12/06
1.8K0
Postgresql 数据库导入导出  物理VS逻辑 集合
进阶数据库系列(二十):PostgreSQL 数据库备份与恢复
此种方式是直接备份数据库物理文件,在pg数据库里,这通常指的是PGDATA变量定义的文件夹,例如:
民工哥
2023/08/22
7.4K0
进阶数据库系列(二十):PostgreSQL 数据库备份与恢复
【云原生进阶之数据库技术】第三章-PostgreSQL-管理-2.2-运维操作
切换su - postgres用户(直接在终端输入psql也可实现),在postgres用户下输入\l
江中散人_Jun
2024/03/20
1620
【云原生进阶之数据库技术】第三章-PostgreSQL-管理-2.2-运维操作
0694-5.10.2--如何将CM内嵌PostgreSQL服务迁移至外部PostgreSQL服务
Cloudera Manager提供了一个嵌入式PostgreSQL数据库服务,用于在创建集群时进行演示和概念验证部署。为了提醒用户此嵌入式数据库不适合生产,Cloudera Manager将显示横幅文本:“您正在非生产模式下运行Cloudera Manager,该模式使用嵌入式PostgreSQL数据库。切换到使用支持的外部数据库,然后再投入生产“。
Fayson
2019/09/03
1.3K0
0694-5.10.2--如何将CM内嵌PostgreSQL服务迁移至外部PostgreSQL服务
PostgreSQL - psql使用汇总
PostgreSQL在安装时自带了pgAdmin和psql,pgAdmin是可视化工具,psql是命令行工具。
雨临Lewis
2022/01/11
2.1K0
postgresql常用管理命令
IT不难
2023/11/17
2980
postgresql常用管理命令
GreenPlum备份和恢复工具之gpbackup和gprestore
Greenplum数据库支持并行和非并行方法来备份和还原数据库。并行操作可扩展,而与系统中段的数量无关,因为段主机各自将数据同时写入本地磁盘存储中。对于非并行备份和还原操作,必须通过网络将数据从网段发送到主服务器,主服务器将所有数据写入其存储中。除了将I/O限制在一台主机之外,非并行备份还要求主服务器具有足够的本地磁盘存储空间来存储整个数据库。
AiDBA宝典
2023/11/06
1.9K1
GreenPlum备份和恢复工具之gpbackup和gprestore
如何备份PostgreSQL数据库
如果您在生产环境中使用PostgreSQL,请务必采取预防措施以确保用户的数据不会丢失。通过频繁备份数据库或使用cron任务自动执行备份,您将能够在数据库丢失或损坏的情况下快速还原系统。幸运的是,PostgreSQL包含的工具使这项任务变得简单易行。
温浪
2018/08/14
15.3K0
PostgreSql 边边角角也能搞死你 之 小菜的一天
很快小菜将测试库的表都弄到了生产库,但是缪牛马上就打电话,告诉小菜不对,问小菜怎么做的,小菜说就 dump restore 呀,缪牛问怎么在生产上看到了其他测试库,怎么搞得。
AustinDatabases
2019/11/13
5260
《PostgreSQL备份与恢复:步骤与最佳实践》
你好,技术圈的小伙伴们!猫头虎博主又来啦!最近发现很多朋友在搜索“PostgreSQL备份方法”、“PostgreSQL恢复数据教程”等关键词,显示了大家对PostgreSQL备份和恢复的浓厚兴趣。那么,这篇《PostgreSQL备份与恢复:步骤与最佳实践》是为了满足大家的这份求知欲。一起深入探讨吧!
猫头虎
2024/04/09
8750
PG Logical Replication 逻辑复制
我下面演示的PG环境是单机多实例的方式部署在同一台物理机上的。部署方式可以参考 上一篇博客。
保持热爱奔赴山海
2019/09/17
1.6K0
PG备份恢复:multiple primary keys for table "t1" are not allowed
数据库导入导出是最常用的功能之一。PostgreSQL的备份工具可以使用pg_dump及pg_dumpall。可以通过pg_dump --help获取其使用方法。这里不对其做过多介绍。主要介绍在使用pg_dump及恢复过程中遇到的一个问题。
yzsDBA
2020/10/29
3.3K0
[译]PG备份恢复工具-pg_dumpbinary
postgresql weekly推荐了几款备份恢复工具,其中一个是pg_dumpbinary。
yzsDBA
2022/03/29
1.2K0
推荐阅读
相关推荐
PostgreSQL 备份与恢复(第一章)
更多 >
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档
查看详情【社区公告】 技术创作特训营有奖征文