昨天一个哥们说postgres的dump很难用,不尽然。下面 是利用Postgres自带的导出工具pg_dump来写的日常逻辑备份脚本,基本实现了每天自动备份,并保留一周时间。
环境:
CentOS 6.2
Postgres 9.1.3
1.整个库逻辑备份方案(相对较小)
~~~
#!/bin/bash
export PGHOME=/home/postgres
export PATH=$PGHOME/bin:$PATH
export PGDATA=/var/pgdata/
export BACKUP_DIR=/home/postgres/backup
export LANG=en_US.utf8
export DATE_1=`date +"%Y-%m-%d"`
export DATE_2=`date -d "-7 day" +"%Y-%m-%d"`
######################################################
##
## purpose:backup total database everyday logically
##
## author :kenyon
##
## created:2013-03-25
##
## restore_script:psql -d db_kenyon -U postgres < /home/postgres/backup/file_name
##
#####################################################
test -f $BACKUP_DIR/db_kenyon_back_$DATE_2
if [ $? -eq 0 ] ; then
rm -f $BACKUP_DIR/db_kenyon_back_$DATE_2
echo " `date +"%Y-%m-%d %H:%M:%S"` the file $BACKUP_DIR/db_kenyon_back_$DATE_2 has been moved"
fi
test -f $BACKUP_DIR/db_kenyon_back_$DATE_1
if [ $? -eq 0 ] ; then
echo "Today's(`date +"%Y-%m-%d %H:%M:%S"`) BACKUP job has done"
else
pg_dump -h 192.168.1.142 -p 5432 -U postgres -b -Fp db_kenyon -f $BACKUP_DIR/db_kenyon_back_$DATE_1
######check the dump file whether produced successfully
test -f $BACKUP_DIR/db_kenyon_back_$DATE_1
if [ $? -eq 0 ]; then
echo " `date +"%Y-%m-%d %H:%M:%S"` the database db_kenyon has been backuped to $BACKUP_DIR/db_kenyon_back_$DATE_1 successfully"
else
echo " `date +"%Y-%m-%d %H:%M:%S"` the pg_dump failed"
fi
fi
~~~
2.单表逻辑备份方案(表相对较大,下面采用的压缩级别为1级)
~~~
#!/bin/bash
export BACKUP_DIR=/home/postgres/backup
export DATE_1=`date +"%Y-%m-%d"`
export DATE_2=`date -d "-7 day" +"%Y-%m-%d"`
#############################################################################
##
## purpose:backup total database everyday logically
##
## author :kenyon
##
## created:2013-03-25
##
## restore_script: pg_restore -U postgres -Fc -d db_name tbl_user_20130218.bak
##
#############################################################################
source /home/postgres/.bash_profile
cd $BACKUP_DIR
if [ -d ./$DATE_2 ] ; then
rm -rf $BACKUP_DIR/$DATE_2
echo " `date +"%Y-%m-%d %H:%M:%S"` the file $BACKUP_DIR/$DATE_2 has been moved"
fi
if [ -d ./$DATE_1 ] ; then
echo "Today's(`date +"%Y-%m-%d %H:%M:%S"`) BACKUP job has done"
else
mkdir -p $BACKUP_DIR/$DATE_1
##### With compress level 1 dump out relation tables ############################
pg_dump -p 5432 -U postgres db_kenyon -Fc -Z 1 -t tbl_user -f $BACKUP_DIR/$DATE_1/tbl_user_$DATE_1.bak
pg_dump -p 5432 -U postgres db_kenyon -Fc -Z 1 -t tbl_company -f $BACKUP_DIR/$DATE_1/tbl_company_$DATE_1.bak
pg_dump -p 5432 -U postgres db_kenyon -Fc -Z 1 -t tbl_report_mon -f $BACKUP_DIR/$DATE_1/tbl_report_mon_$DATE_1.bak
pg_dump -p 5432 -U postgres db_kenyon -Fc -Z 1 -t tbl_report_daily -f $BACKUP_DIR/$DATE_1/tbl_report_daily_$DATE_1.bak
echo "Today's(`date +"%Y-%m-%d %H:%M:%S"`) BACKUP job has fineshed"
fi
~~~
3.Copy做增量备份 (时间或者ID)
~~~
psql -d db_kenyon -c"copy (select * from schema_name.table_name where crt_time>=$date) to '/home/postgres/tbl.bak'"
~~~
~~~
psql -d db_kenyon -c"copy (select * from schema_name.table_name where id>=$id) to '/home/postgres/tbl.bak'"
~~~
4.crontab定时调度
50 1 * * * sh /home/postgres/script/DB_backup.sh >> /home/postgres/backup/backup.log 2>&1
5.说明
上述脚本相对简单,还可以加入其它一些异常判断和邮件发送等。
- 数据表
- 模式Schema
- 表的继承和分区
- 常用数据类型
- 函数和操作符-一
- 函数和操作符-二
- 函数和操作符-三
- 索引
- 事物隔离
- 性能提升技巧
- 服务器配置
- 角色和权限
- 数据库管理
- 数据库维护
- 系统表
- 系统视图
- SQL语言函数
- PL-pgSQL过程语言
- PostgreSQL 序列(SEQUENCE)
- PostgreSQL的时间-日期函数使用
- PostgreSQL 查看数据库,索引,表,表空间大小
- 用以查询某表的详细 包含表字段的注释信息
- PostgreSQL 系统表查看系统信息
- postgre存储过程简单实用方法
- PostgreSQL实用日常维护SQL
- PostgreSQL的时间函数使用整理
- 命令
- pg_ctl控制服务器
- initdb 初始化数据库簇
- createdb创建数据库
- dropdb 删除数据库
- createuser创建用户
- dropuser 删除用户
- psql交互式工具
- psql命令手册
- pg_dump 数据库转储
- pg_restore恢复数据库
- vacuumdb 清理优化数据库
- reindexdb 数据库重创索引
- createlang 安装过程语言
- droplang 删除过程语言
- pg_upgrade 升级数据库簇
- 调试存储过程
- 客户端命令-一
- 客户端命令-二
- 使用技巧
- PostgreSQL删除重复数据
- postgresql 小技巧
- PostgreSQL的10进制与16进制互转
- PostgreSQL的汉字转拼音
- Postgres重复数据的更新一例
- PostgreSQL使用with一例
- PostgreSQL在函数内返回returning
- PostgreSQL中的group_concat使用
- PostgreSQL数据库切割和组合字段函数
- postgresql重复数据的删除
- PostgreSQL的递归查询(with recursive)
- PostgreSQL函数如何返回数据集
- PostgreSQL分区表(Table Partitioning)应用 - David_Tang - 博客园
- PostgreSQL: function 返回结果集多列和单列的例子
- 利用pgAgent创建定时任务
- 浅谈 PostgreSQL 类型转换类似Oracle
- postgresql在windows(包括win7)下的安装配置
- PostgreSQL简介、安装、用户管理、启动关闭、创建删除数据库 (2010-11-08 12-52-51)转载▼标签: 杂谈分类: PostgreSQL
- PostgreSQL的generate_series函数应用
- PostgreSQL 8.3.1 全文检索(Full Text Search)
- postgresql record 使用
- 备份恢复
- PostgreSQL基于时间点恢复(PITR)
- Postgresql基于时间点恢复PITR案例(二)
- Postgres逻辑备份脚本
- Postgres invalid command \N数据恢复处理