PostgreSQL 使用PG_Rman进行物理备份
背景
在Oracle下我们可以使用rman进行物理备份,支持数据库的全量、增量、归档的备份模式
而PostgreSQL作为开源数据库,近些时间来也一直向商业版数据库看齐,也推出了开源功工具pg_rman,也具备了oracle rman大部分的功能
pg_rman介绍
- pg_rman是一个开源的PostgreSQL备份软件;
- pg_rman使用的是pg_start_backup(), copy, pg_stop_backup()的备份模式;
- pg_rman跑的不是流复制协议,而是文件拷贝,所以pg_rman必须和数据库节点跑一起;
如果在standby节点跑pg_rman,pg_rman则需要通过网络连接到主节点执行pg_start_backup和pg_stop_backup。
pg_rman的用法非常简单,支持以下几种运行模式。
项目地址
文档地址
主要代码命令:
| 命令 | 说明 |
|---|---|
| init | 初始化备份目录 |
| backup | 在线备份 |
| restore | 恢复 |
| show | 查看备份历史 |
| validate | 验证备份 |
| delete | 删除备份文件 |
| purge | 从备份目录中删除已删除备份 |
安装
下载并安装rpm安装包
我们一般使用的PG数据库版本为9.6.3,那么对应pg_rman也有相应的版本为:
pg_rman-1.3.7-1.pg96.rhel7.x86_64.rpm
同时需要下载依赖:
postgresql96-libs-9.6.11-1PGDG.rhel7.x86_64
或者直接使用wget下载:
[root@out-pg ~]# wget https://github.com/ossc-db/pg_rman/releases/download/V1.3.7/pg_rman-1.3.7-1.pg96.rhel7.x86_64.rpm
[root@out-pg ~]# wget https://yum.postgresql.org/9.6/redhat/rhel-7-x86_64/postgresql96-libs-9.6.11-1PGDG.rhel7.x86_64.rpm
下载后安装rpm包rpm -ivh postgresql96-libs-9.6.11-1PGDG.rhel7.x86_64.rpmrpm -ivh pg_rman-1.3.7-1.pg96.rhel7.x86_64.rpm
[root@out-pg ~]# rpm -ivh postgresql96-libs-9.6.11-1PGDG.rhel7.x86_64.rpm
警告:postgresql96-libs-9.6.11-1PGDG.rhel7.x86_64.rpm: 头V4 DSA/SHA1 Signature, 密钥 ID 442df0f8: NOKEY
准备中... ################################# [100%]
软件包 postgresql96-libs-9.6.11-1PGDG.rhel7.x86_64 已经安装
[root@out-pg ~]# rpm -ivh pg_rman-1.3.7-1.pg96.rhel7.x86_64.rpm
准备中... ################################# [100%]
软件包 pg_rman-1.3.7-1.pg96.rhel7.x86_64 已经安装
安装完成后,pg_rman会安装在默认的/usr/psql-9.6/目录下,接下来要设置环境变量
设置环境变量
修改/root/.bash_profilevim /root/.bash_profilesource /root/.bash_profile
PATH=$PATH:$HOME/bin
export PG_RMAN=/usr/pgsql-9.6
export PGHOME=/usr/local/pgsql
export PGDATA=/db/pgsql/data
export PGLIB=/usr/local/pgsql/lib
export SRVLOG_PATH=/var/lib/pgsql/9.6/data/pg_log
export ARCLOG_PATH=/home/postgres/arc_log
export BACKUP_PATH=/home/postgres/backup
export PATH=$PGHOME/bin:$PATH:$PG_RMAN/bin
export PATH
其中PGHOME、PGDATA、PGLIB与实际目录一致
SRVLOG_PATH、ARCLOG_PATH、BACKUP_PATH为rman需要
设置完环境变量后,输入pg_rman命令
[root@out-pg ~]# pg_rman
pg_rman manage backup/recovery of PostgreSQL database.
Usage:
pg_rman OPTION init
pg_rman OPTION backup
pg_rman OPTION restore
pg_rman OPTION show [DATE]
pg_rman OPTION show detail [DATE]
pg_rman OPTION validate [DATE]
pg_rman OPTION delete DATE
pg_rman OPTION purge
Generic options:
--help show this help, then exit
--version output version information, then exit
生效
创建文件夹mkdir /home/postgres/arc_log/
附加权限chown postgres:postgres / /home/postgres/arc_log
初始化rman
使用rman init命令初始化
[root@out-pg ~]# pg_rman init
pg_rman: could not open file "/db/pgsql/data/global/pg_control" for reading: 没有那个文件或目录
上面错误是由于PG_DATA环境变量设置不正确
修改后再执行init
[root@out-pg ~]# pg_rman init
ERROR: backup catalog already exist and it's not empty
以上错误需要重新删除backup目录,删除后重新初始化正常
[root@out-pg ~]# rm -rf /home/postgres/backup/*
[root@out-pg ~]# pg_rman init
INFO: ARCLOG_PATH is set to '/home/postgres/arc_log'
INFO: SRVLOG_PATH is set to '/var/lib/pgsql/9.6/data/pg_log'
生成备份元数据,查看目录
[root@out-pg ~]# ll /home/postgres/backup/
总用量 8
drwx------ 4 root root 35 11月 23 13:30 backup
-rw-r--r-- 1 root root 83 11月 23 13:30 pg_rman.ini
-rw-r--r-- 1 root root 40 11月 23 13:30 system_identifier
drwx------ 2 root root 6 11月 23 13:30 timeline_history
[root@out-pg ~]# cat /home/postgres/backup/pg_rman.ini
ARCLOG_PATH='/home/postgres/arc_log'
SRVLOG_PATH='/var/lib/pgsql/9.6/data/pg_log'
修改postgres.conf
vim /usr/local/postgresql/data/postgresql.conf
修改三个参数wal_level,archive_mode,archive_command
wal_level = archive
archive_mode = on
archive_command = 'cp %p /home/postgres/arc_log/%f'
重启数据库
[root@out-pg backup]# service postgresql restart
Restarting PostgreSQL: ok
备份数据库
全量备份
备份命令pg_rman backup -b full -U postgres -d aegis -h 127.0.0.1 -p 5432
[root@out-pg backup]# pg_rman backup -b full -U postgres -d aegis -h 127.0.0.1 -p 5432
INFO: copying database files
INFO: copying archived WAL files
INFO: backup complete
INFO: Please execute 'pg_rman validate' to verify the files are correctly copied.
可以添加-Z参数使用zlib压缩数据,大大减少备份量,一下为对比,节省空间将近50%
[root@out-pg ~]# du /home/postgres/backup/20181123/* -slh
13G /home/postgres/backup/20181123/142131
7.0G /home/postgres/backup/20181123/154458
备份完成后需要验证
不验证的备份无法使用
[root@out-pg backup]# pg_rman validate
INFO: validate: "2018-11-23 14:21:31" backup and archive log files by CRC
INFO: backup "2018-11-23 14:21:31" is valid
最后查看备份
使用命令pg_rman show
[root@out-pg backup]# pg_rman show
=====================================================================
StartTime EndTime Mode Size TLI Status
=====================================================================
2018-11-23 14:21:31 2018-11-23 14:26:47 FULL 13GB 1 OK
转载自:
https://www.jianshu.com/p/db2b6d218e37
PostgreSQL 使用PG_Rman进行物理备份的更多相关文章
- postgresql 常规操作以及检查备份
一.建表时,复制源表的信息test=# test=# \d test.t1 Table "test.t1" Column | Type | Collation | Nullable ...
- Oracle 物理备份--rman
Oracle 物理备份--rman 1.直接在服务器,打开命令行,输入: rman target/ 2.配置参数也一同备份 configure controlfile autobackup on; 如 ...
- NDB Cluster 存储引擎物理备份
NDB Cluster 存储引擎物理备份NDB Cluster 存储引擎也是一款事务性存储引擎,和Innodb 一样也有redo 日志.NDBCluter 存储引擎自己提供了备份功能,可以通过相关的命 ...
- 使用 xtrabackup 进行MySQL数据库物理备份
0. xtrabackup的功能 能实现的功能: 非阻塞备份innodb等事务引擎数据库. 备份myisam表会阻塞(需要锁). 支持全备.增量备份.压缩备份. 快速增量备份(xtradb,原理类似于 ...
- mysql之使用xtrabackup进行物理备份、恢复、在线克隆从库、在线重做主从
注:图片来自<深入浅出MySQL 数据库开发 优化与管理维护 第2版> 物理备份和恢复 1.冷备份:停掉mysql再备份,一般很少用,因为很多应用不允许长时间停机,停机备份的可以直接CP数 ...
- Oracle基础 物理备份 冷备份和热备份(转)
一.冷备份介绍: 冷备份数据库是将数据库关闭之后备份所有的关键性文件包括数据文件.控制文件.联机REDO LOG文件,将其拷贝到另外的位置.此外冷备份也可以包含对参数文件和口令文件的备份,但是这 ...
- MySQL · 物理备份 · Percona XtraBackup 备份原理
http://mysql.taobao.org/monthly/2016/03/07/ 前言 Percona XtraBackup(简称PXB)是 Percona 公司开发的一个用于 MySQL 数据 ...
- xtrabackup进行物理备份、恢复、在线克隆从库、在线重做主从
http://www.lai18.com/content/4733997.html 注:图片来自<深入浅出MySQL 数据库开发 优化与管理维护 第2版> 物理备份和恢复 1.冷备份:停掉 ...
- XtraBackup物理备份 阿里云的Mysql备份方案
XtraBackup物理备份 Percona XtraBackup是世界上唯一的开源,免费的MySQL热备份软件,为InnoDB和XtraDB 数据库执行非阻塞备份.使用Percona XtraBac ...
随机推荐
- 《MySQL数据库从入门到精通》 高级运维人才的必备书籍
众所周知,每年就业市场都会迎来千万量级的高校毕业生,然而企业招工难和毕业生就业难的矛盾却一直没有得到很好地解决.究其原因,主要矛盾还是在于传统的学历教育与企业实际需求相脱节.为了杜绝高校毕业生求职时常 ...
- redis列表数据类型---list
一.概述 redis列表是简单的字符串列表,按照插入顺序排序 可以添加一个元素到列表的头部(左边)或者尾部(右边) 一个列表最多可以包含2^32-1个元素(每个列表超过40亿个元素). 二.redis ...
- DO、VO、DTO 区别
DTO:数据传输对象,主要用于外部接口参数传递封装,接口与接口进行传递使用. VO:视图对象,主要用于给前端返回页面参数使用. DO:数据对象,主要用于数据库层传递. DTO转DO:接口接收参数将参数 ...
- C# 小数各种操作
Math.Ceiling();//向上取整 //举一反三 Math.Floor();//向下取整 Math.Round();//四舍六入五取偶
- ajax提交异常解决
一.遇到的问题 在项目中使用ajax提交表单失败,并且后台程序都没有执行,分析具体问题是由于post表单时contenttype的类型不一致. 二.解决方式 $.ajax({ type: 'post' ...
- Jquery DataTables 服务器后端分页 Ajax请求添加自定义参数.
项目使用AdminLTE(基于Bootstrap 二次开发的框架)作为开发框架. 使用DataTables 的时候部分页面需要传参 给后台做筛选过滤. 但是不知道怎么将DataTables的参数 和自 ...
- 在我的电脑中删除wps云文档图标
在我的电脑中删除wps云文档图标 右键点击win10左下角选择运行,输入regedit打开注册表后,找到以下注册表路径: HKEY_CURRENT_USER\Software\Microsoft\Wi ...
- 拦截器中获取不到controller注解问题
刚刚在测试接口的时候发现一个奇怪的问题:通过拦截器获取 controller 类注解,有些能获取到,有些又不能获取到,见鬼了. [环境]: 1. springboot :2.2.0.RELEASE [ ...
- Django中生成随机验证码(pillow模块的使用)
Django中生成随机验证码 1.html中a标签的设置 <img src="/get_validcode_img/" alt=""> 2.view ...
- 今日前端框架Vue学习笔记
在线网页网址http://xingxunxinxi.com/StudentCourse/first.html代码 界面