PostgreSQL:如何使用wal-e进行增量备份

时间:2018-07-05 08:28:36

标签: postgresql psycopg2 database-backups wal-e

我是Postgresql的新手。我已使用psycopg2连接到演示数据库,并使用python faker插入了数据。我想使用工具WAL-E进行增量备份,并希望了解它的实际工作方式。但是,少数教程并没有太大帮助,因为它们不是针对天真的用户的。

有人可以帮助解释这些步骤,只是如何使用WAL-E备份数据吗?那将是很大的帮助!我在Ubuntu 18.04中使用psql 10.4。

谢谢

1 个答案:

答案 0 :(得分:1)

安装Python和依赖项

apt-get install python-dev python-virtualenv libevent-dev pv lzop daemontools
sudo apt-get install -y python3-pip
sudo apt-get install build-essential libssl-dev libffi-dev
sudo apt-get install -y python3-venv

创建并激活虚拟环境

Sudo python3 -m venv /opt/wal-e
source /opt/wal-e/bin/activate

安装Wal-e

sudo /opt/wal-e/bin/pip install wal-e[aws]

设置环境变量

umask u=rwx,g=rx,o=
mkdir -p /etc/wal-e.d/env
sudo -i -u root
echo "Your AWS Secret Key" > /etc/wal-e.d/env/AWS_SECRET_ACCESS_KEY
echo "Your AWS Access Key" > /etc/wal-e.d/env/AWS_ACCESS_KEY_ID
echo 'Your AWS Region > /etc/wal-e.d/env/AWS_REGION
echo 's3://some-bucket/directory/or/whatever' > /etc/wal-e.d/env/WALE_S3_PREFIX
sudo chown -R root:postgres /etc/wal-e.d

更改Postgres配置以激活归档

sudo nano /etc/postgresql/10/main/postgresql.conf
wal_level = replica
archive_mode = on
archive_command = '/usr/bin/envdir /etc/wal-e.d/env /opt/wal-e/bin/wal-e wal-push %p'
archive_timeout = 60
sudo systemctl restart postgresql

测试Wal-e是否正常工作

sudo -i -u postgres
/usr/bin/envdir /etc/wal-e.d/env /opt/wal-e/bin/wal-e backup-list

现在将您的第一个基础备份推送到S3

/usr/bin/envdir /etc/wal-e.d/env /opt/wal-e/bin/wal-e backup-push /var/lib/postgresql/10/main

现在将Cron设置为定期备份

sudo -i -u postgres 

mkdir logs
touch backup.log
touch deletebackup.log

crontab -e

00 00 * * * /usr/bin/envdir /etc/wal-e.d/env /opt/wal-e/bin/wal-e backup-push /var/lib/postgresql/10/main > ~/logs/backup.log 2>&1
00 00 * * * /usr/bin/envdir /etc/wal-e.d/env  /opt/wal-e/bin/wal-e delete --confirm retain 1 > ~/logs/deletebackup.log 2>&1