当前位置: gwwp168->postgresql > PostgreSQL技术大讲堂 - 第42讲:pg_rman部署与使用

PostgreSQL技术大讲堂 - 第42讲:pg_rman部署与使用

2024-01-29作者:gwwp168来源:www.gwwp168.com


PostgreSQL从小白到专家,是从入门逐渐能力提升的一个系列教程,内容包括对PG基础的认知、包括安装使用、包括角色权限、包括维护管理、、等内容,希望对热爱PG、学习PG的同学们有帮助,欢迎持续关注CUUG PG技术大讲堂。


第42讲:pg_rman部署与使用


PostgreSQL第42讲:1月20日(周六)19:30,钉钉群(35822460)& 视频号(数据库老陈)直播

内容1:pg_rman简介

内容2:Pg_rman部署

内容3:使用pg_rman进行备份与恢复

内容4:制定自动维护策略


pg_rman简介

pg_rman是一款开源的备份恢复软件,支持在线和基于PITR的备份恢复方式。

pg_rman类似于oracle的rman,可以进行全量、增量、归档日志的备份。

https://github.com/ossc-db/pg_rman/releases,注意跟数据库版本配套。

pg_rman特点:

使用简单,一个命令即可完成备份和恢复。

支持在线全备、增量、归档日志备份

支持备份压缩。

支持自动备份维护,自动删除过期的WAL备份文件。

支持备份验证。

支持基于PITR的配置文件生成器。


pg_rman部署

1、上传安装包并解压安装(postgres用户安装)

# tar vxf pg_rman-1.3.9-pg12.tar.gz

# cd pg_rman-1.3.9-pg12

# make

# make install

默认会安装到$PG_HOME/bin目录下。

2、初始化环境

--设置备份目录,在用户配置文件里面添加如下:

export BACKUP_PATH=/home/postgres/pg_rman_bk1

--让环境变量生效

source .bash_profile

--初始化备份目录,验证归档路径,日志目录,同时在备份路径下产生跟目标数据库相关的文件。

$ pg_rman init

INFO: ARCLOG_PATH is set to '/home/postgres/arch'

INFO: SRVLOG_PATH is set to '/usr/local/pg12.2/data/pg_log'

--查看备份路径下的内容:

20200603 backup pg_rman.ini system_identifier timeline_history


pg_rman命令

语法:

pg_rman [OPTION] COMMAND

COMMAND:

init 初始化备份目录

backup 在线备份

restore 恢复

show 查看备份历史

validate 验证备份

delete 从知识库中删除备份信息

purge 从备份目录中删除已实际的备份文件


全量备份

对数据库做全备:

pg_rman backup --backup-mode=full -C -P

验证数据库备份(必须要验证,否则后续无法做增量备份):

pg_rman validate

查看备份信息:

pg_rman show

=====================================================================

StartTime EndTime Mode Size TLI Status

=====================================================================

2022-11-16 21:41:18 2022-11-16 21:41:21 FULL 139MB 3 OK


增量备份

对数据库做增量备份:

pg_rman backup --backup-mode=incremental

验证数据库备份(必须要验证,否则后续无法做增量备份):

pg_rman validate

查看备份信息:

pg_rman show

=====================================================================

StartTime EndTime Mode Size TLI Status

=====================================================================

2022-11-16 21:44:32 2022-11-16 21:44:34 INCR 33MB 3 OK

2022-11-16 21:41:18 2022-11-16 21:41:21 FULL 139MB 3 OK


归档备份

归档备份:

pg_rman backup --backup-mode=archive

验证数据库备份(必须要验证,否则后续无法做增量备份):

pg_rman validate

查看备份信息:

pg_rman show

=====================================================================

StartTime EndTime Mode Size TLI Status

=====================================================================

2022-11-16 21:51:50 2022-11-16 21:51:51 ARCH 16MB 3 OK

2022-11-16 21:44:32 2022-11-16 21:44:34 INCR 33MB 3 OK

2022-11-16 21:41:18 2022-11-16 21:41:21 FULL 139MB 3 OK


完全恢复

恢复数据文件:

pg_rman restore

恢复过程会自动修改和生成需要的文件:

INFO: restoring WAL files from backup "2022-11-16 21:51:50"

INFO: restoring online WAL files and server log files

INFO: add recovery related options to postgresql.conf

INFO: generating recovery.signal

INFO: restore complete

HINT: Recovery will start automatically when the PostgreSQL server is started.

启动数据库:

pg_ctl start


时间点恢复

恢复数据文件:

pg_rman restore --recovery-target-time="2022-11-16 22:05:22"

恢复过程会自动修改和生成需要的文件:

INFO: restoring WAL files from backup "2022-11-16 21:51:50"

INFO: restoring online WAL files and server log files

INFO: add recovery related options to postgresql.conf

INFO: generating recovery.signal

INFO: restore complete

HINT: Recovery will start automatically when the PostgreSQL server is started.

启动数据库:

pg_ctl start

执行函数:

Select pg_wal_replay_resume() ;


备份数据维护

删除指定时间点的备份,如果只有一个可用备份,则需要加上-f选项:

pg_rman delete "2022-11-16 21:44:34" -f

上面删除操作只是删除pg_rman目录中的记录,实际的备份数据没有删除,需要purge才能够真正删除:

pg_rman purge

INFO: DELETED backup "2022-11-16 21:44:32" is purged

INFO: DELETED backup "2022-11-16 21:41:18" is purged


pg_rman.ini文件

可以根据备份策略,制定自动维护配置,在进行备份操作时会自动检查:

RCLOG_PATH='/home/postgres/arch' --归档目录

SRVLOG_PATH='/home/postgres/data/log' --数据库错误日志目录

COMPRESS_DATA = YES --压缩数据

KEEP_ARCLOG_FILES = 10 --保存归档文件个数

KEEP_ARCLOG_DAYS = 10 --保存归档的天数

KEEP_DATA_GENERATIONS = 3 --备份冗余度

KEEP_DATA_DAYS = 10 --保存备份集时间

KEEP_SRVLOG_FILES = 10 --保存日志文件个数

KEEP_SRVLOG_DAYS = 10 --保存日志文件天数


自动维护操作

在进行备份操作时会自动检查:

pg_rman backup --backup-mode=full

INFO: start deleting old archived WAL files from ARCLOG_PATH (keep files = 10, keep days = 10)

INFO: the threshold timestamp calculated by keep days is "2022-11-06 00:00:00"

INFO: start deleting old backup (keep generations = 3 AND keep after = 2022-11-06 00:00:00)


CUUG PostgreSQL技术大讲堂系列公开课第42讲-pg_rman部署与使用,往期视频及文档,请联系CUUG。

  • 1月17日阿里云PolarDB开发者大会PolarDB DevCon
  • 2024-1-12,恭喜CUUG 王同学获得Oracle OCP证书
  • 2024年第13届PostgreSQL中国技术大会来啦!
  • DB-Engines:PostgreSQL is the DBMS of the Year 2023
  • 2024-02-02,恭喜CUUG 刘同学通过Oracle考试获得OCP 19c证书
  • 3月30日,工信部人才交流中心PostgreSQL认证考试顺利结束
  • 2024年4月8日,工信人才发布红头文件:PostgreSQL数据库管理人才研修与评测班
  • 恭喜CUUG入选2024年工业和信息化重点领域人才能力评价支撑机构
  • 天津职业技术师范大学《PolarDB开源数据库工作室》授牌仪式顺利完成
  • 温州大学国产开源数据库工作室成功举办PostgreSQL技能培训活动
  • 阿里云PolarDB开发者大会圆满结束,CUUG两次获奖
  • 2024年首张Oracle OCP证书-CUUG胡同学
  • 北京培黎职业学院 - PolarDB开源国产数据库工作室成立揭牌 - CUUG
  • 今天(5月6日),CUUG 赵同学收到19c OCM认证考试证书!
  • Oracle数据库加入AI功能,Database 23c改名为Database 23ai
  • PostgreSQL技术大讲堂 - 第51讲:老陈与德哥聊一聊数据库调优
  • 5月17日,PolarDB开源数据库沙龙(青岛站)成功举办-CUUG
  • PostgreSQL技术大讲堂 - 第44讲:pg流复制部署
  • oracle ocp证书有效期多长时间
  • PostgreSQL技术大讲堂 - 第52讲:与德哥背后的男人们聊如何实现自动性能调优
  • 5月16日,开源驱动教育创新研讨会(青岛站)成功举办-CUUG
  • PostgreSQL技术大讲堂 - 第56讲:老陈与德哥聊“数据库孤儿文件”
  • PostgreSQL技术大讲堂 - 第45讲:poc-tpcc测试
  • PostgreSQL技术大讲堂 - 第46讲:poc-tpch测试
  • PostgreSQL技术大讲堂 - 第47讲:JMETER工具使用
  • PostgreSQL技术大讲堂 - 第48讲:PG高可用实现keepalived
  • PostgreSQL技术大讲堂 - 第50讲:PG分区表管理
  • OCP认证能不能在家中考试,不去VUE考点考试吗?
  • 恭喜CUUG Guo同学以较高分数通过19c OCM认证考试!
  • 5月25日,温州大学49名学生参加工信人才PostgreSQL认证考试!
  • 5月30日,PG中级证书来了!工信人才PostgreSQL管理员认证证书!
  • 6月1日,汇华学院12名学生参加工信人才PostgreSQL认证考试!
  • PG技术大讲堂 - 第55讲:通义大模型+向量数据库实现AI的外脑
  • PostgreSQL技术大讲堂 - 第53讲:老陈与德哥开讲PostgreSQL 17新特性
  • PostgreSQL技术大讲堂 - 第54讲:如何在上线前精准评估PG SQL性能
  • 有大奖!第13届PostgreSQL中国技术大会:聚焦云端创新,汇聚智慧共享
  • PolarDB开源社区走进金蝶,开源数据库沙龙成功举办!
  • 阿里云PolarDB再获顶会SIGMOD最佳论文奖
  • 阿里云斩获国际数据库顶会ICDE 2024最佳论文
  • 腾讯云数据库TDSQL荣获深圳市科技进步奖一等奖
  • Oracle OCP认证还值得考吗 考OCP证书需要门槛吗
  • PostgreSQL技术大讲堂 - 第57讲:老陈与德哥聊“数据库安全”
  • PostgreSQL技术大讲堂 - 第58讲:老陈与德哥聊“txid从32位变成64位的影响与调整”
  • 报名啦!第13届PostgreSQL中国技术大会,”聚焦云端创新 汇聚智慧共享“
  • 汇华学院PG证书来了!工信人才&CUUG PostgreSQL管理员认证!
  • 温州大学PG证书来了!工信人才PostgreSQL管理员认证证书!
  • 7月8日,恭喜CUUG 张同学通过19c OCM认证考试,成绩公布!
  • Oracle OCP证书还有用吗 含金量有多高
  • 腾讯云认证级别名称TCA、TCP、TCE升级为TCCA、TCCP、TCCE
  • 怎么报考腾讯云TDSQL数据库工程师认证(TCCA、TCCP、TCCE)