第42讲:PostgreSQL技术大讲堂 - pg_rman的安装与操作

发表时间: 2024-01-19 13:50


PostgreSQL从小白到专家,是从入门逐渐能力提升的一个系列教程,内容包括对PG基础的认知、包括安装使用、包括角色权限、包括维护管理、、等内容,希望对热爱PG、学习PG的同学们有帮助,欢迎持续关注CUUG PG技术大讲堂。


第42讲:pg_rman部署与使用


PostgreSQL第42讲:1月20日(周六)19:30,钉钉群(35822460)& 视频号(数据库老陈)直播

内容1:pg_rman简介

内容2:Pg_rman部署

内容3:使用pg_rman进行备份与恢复

内容4:制定自动维护策略


pg_rman简介

pg_rman是一款开源的备份恢复软件,支持在线和基于PITR的备份恢复方式。

pg_rman类似于oracle的rman,可以进行全量、增量、归档日志的备份。


https://github.com/ossc-db/pg_rman/releases,注意跟数据库版本配套。

pg_rman特点:

使用简单,一个命令即可完成备份和恢复。

支持在线全备、增量、归档日志备份

支持备份压缩。

支持自动备份维护,自动删除过期的WAL备份文件。

支持备份验证。

支持基于PITR的配置文件生成器。


pg_rman部署

1、上传安装包并解压安装(postgres用户安装)

# tar vxf pg_rman-1.3.9-pg12.tar.gz

# cd pg_rman-1.3.9-pg12

# make

# make install

默认会安装到$PG_HOME/bin目录下。

2、初始化环境

--设置备份目录,在用户配置文件里面添加如下:

export BACKUP_PATH=/home/postgres/pg_rman_bk1

--让环境变量生效

source .bash_profile

--初始化备份目录,验证归档路径,日志目录,同时在备份路径下产生跟目标数据库相关的文件。

$ pg_rman init

INFO: ARCLOG_PATH is set to '/home/postgres/arch'

INFO: SRVLOG_PATH is set to '/usr/local/pg12.2/data/pg_log'

--查看备份路径下的内容:

20200603 backup pg_rman.ini system_identifier timeline_history


pg_rman命令

语法:

pg_rman [OPTION] COMMAND

COMMAND:

init 初始化备份目录

backup 在线备份

restore 恢复

show 查看备份历史

validate 验证备份

delete 从知识库中删除备份信息

purge 从备份目录中删除已实际的备份文件


全量备份

对数据库做全备:

pg_rman backup --backup-mode=full -C -P

验证数据库备份(必须要验证,否则后续无法做增量备份):

pg_rman validate

查看备份信息:

pg_rman show

=====================================================================

StartTime EndTime Mode Size TLI Status

=====================================================================

2022-11-16 21:41:18 2022-11-16 21:41:21 FULL 139MB 3 OK


增量备份

对数据库做增量备份:

pg_rman backup --backup-mode=incremental

验证数据库备份(必须要验证,否则后续无法做增量备份):

pg_rman validate

查看备份信息:

pg_rman show

=====================================================================

StartTime EndTime Mode Size TLI Status

=====================================================================

2022-11-16 21:44:32 2022-11-16 21:44:34 INCR 33MB 3 OK

2022-11-16 21:41:18 2022-11-16 21:41:21 FULL 139MB 3 OK


归档备份

归档备份:

pg_rman backup --backup-mode=archive

验证数据库备份(必须要验证,否则后续无法做增量备份):

pg_rman validate

查看备份信息:

pg_rman show

=====================================================================

StartTime EndTime Mode Size TLI Status

=====================================================================

2022-11-16 21:51:50 2022-11-16 21:51:51 ARCH 16MB 3 OK

2022-11-16 21:44:32 2022-11-16 21:44:34 INCR 33MB 3 OK

2022-11-16 21:41:18 2022-11-16 21:41:21 FULL 139MB 3 OK


完全恢复

恢复数据文件:

pg_rman restore

恢复过程会自动修改和生成需要的文件:

INFO: restoring WAL files from backup "2022-11-16 21:51:50"

INFO: restoring online WAL files and server log files

INFO: add recovery related options to postgresql.conf

INFO: generating recovery.signal

INFO: restore complete

HINT: Recovery will start automatically when the PostgreSQL server is started.

启动数据库:

pg_ctl start


时间点恢复

恢复数据文件:

pg_rman restore --recovery-target-time="2022-11-16 22:05:22"

恢复过程会自动修改和生成需要的文件:

INFO: restoring WAL files from backup "2022-11-16 21:51:50"

INFO: restoring online WAL files and server log files

INFO: add recovery related options to postgresql.conf

INFO: generating recovery.signal

INFO: restore complete

HINT: Recovery will start automatically when the PostgreSQL server is started.

启动数据库:

pg_ctl start

执行函数:

Select pg_wal_replay_resume() ;


备份数据维护

删除指定时间点的备份,如果只有一个可用备份,则需要加上-f选项:

pg_rman delete "2022-11-16 21:44:34" -f

上面删除操作只是删除pg_rman目录中的记录,实际的备份数据没有删除,需要purge才能够真正删除:

pg_rman purge

INFO: DELETED backup "2022-11-16 21:44:32" is purged

INFO: DELETED backup "2022-11-16 21:41:18" is purged


pg_rman.ini文件

可以根据备份策略,制定自动维护配置,在进行备份操作时会自动检查:

RCLOG_PATH='/home/postgres/arch' --归档目录

SRVLOG_PATH='/home/postgres/data/log' --数据库错误日志目录

COMPRESS_DATA = YES --压缩数据

KEEP_ARCLOG_FILES = 10 --保存归档文件个数

KEEP_ARCLOG_DAYS = 10 --保存归档的天数

KEEP_DATA_GENERATIONS = 3 --备份冗余度

KEEP_DATA_DAYS = 10 --保存备份集时间

KEEP_SRVLOG_FILES = 10 --保存日志文件个数

KEEP_SRVLOG_DAYS = 10 --保存日志文件天数


自动维护操作

在进行备份操作时会自动检查:

pg_rman backup --backup-mode=full

INFO: start deleting old archived WAL files from ARCLOG_PATH (keep files = 10, keep days = 10)

INFO: the threshold timestamp calculated by keep days is "2022-11-06 00:00:00"

INFO: start deleting old backup (keep generations = 3 AND keep after = 2022-11-06 00:00:00)


CUUG PostgreSQL技术大讲堂系列公开课第42讲-pg_rman部署与使用,往期视频及文档,请联系CUUG。