使用restic做数据文件定时备份

[Valdanitooooo]

为什么选择restic

• restic支持的操作系统非常多，这一点可以从它的安装文档看出来
• restic支持的后端存储非常多
  • Local directory
  • sftp server (via SSH)
  • HTTP REST server (protocol, rest-server)
  • AWS S3 (either from Amazon or using the Minio server)
  • OpenStack Swift
  • BackBlaze B2
  • Microsoft Azure Blob Storage
  • Google Cloud Storage
  • And many other services via the rclone Backend
• restic开源，社区活跃，还在不断维护，https://github.com/restic/restic
• 文件先加密再传输备份
• Restic 配置信息直接写在repository，只要有repository密码，在任何安装了 Restic 的计算机上都可以操作repository
• 类似于git的版本管理，除了第一次，之后都是增量备份，即每次只备份变化的部分
• 每次备份都会生成一个快照，记录当前时间点的文件结构，可以找回特定时间点的文件
• 基于命令行，操作简单

安装restic

sudo apt-get install restic

初始化备份repository

我们使用mino存储，使用minio时需要先配置好两个环境变量

export AWS_ACCESS_KEY_ID=<YOUR-MINIO-ACCESS-KEY-ID>
export AWS_SECRET_ACCESS_KEY= <YOUR-MINIO-SECRET-ACCESS-KEY>

然后我们初始化这个repository，有点像git init

restic -r s3:http://****:**/restic init

这里需要输入repository密码，忘记密码就再也恢复不了数据，用一个简单的密码restic

执行备份

restic -r s3:http://localhost/restic backup <文件或目录的路径>

查看备份

restic -r s3:http://****:**/restic snapshots

输出

enter password for repository:
password is correct
ID        Date                 Host        Tags        Directory
----------------------------------------------------------------------
9899f1f2  2021-01-15 15:25:20  ****rv2               /home/******/**_postgresql
4be282b1  2021-01-15 15:26:46  ****rv2               /home/******/**_postgresql
a4aade3e  2021-01-15 15:28:48  ****rv2               /home/******/**_postgresql
----------------------------------------------------------------------
3 snapshots

有点像git log

查看备份内容

通过snapshots的ID来查询

restic -r s3:http://****:**/restic ls 9899f1f2

会列出所有备份的文件

备份恢复

这里也是要指定要恢复的snapshots的ID

restic -r s3:http://****:**/restic restore 9899f1f2 -t ./

测试恢复的数据是否可用

直接用恢复的数据作为数据卷跑postgres

version: '3.2'
services:
  postgresql:
    image: postgres:11.3
    container_name: ****-postgresql
    volumes:
      - ./****_postgresql/:/var/lib/postgresql/data/
    environment:
      - POSTGRES_DB=****
      - POSTGRES_USER=****
      - POSTGRES_PASSWORD=****
      - TZ=Asia/Shanghai
    command: postgres -c 'max_connections=1000'
    ports:
      - 5432:5432

看一下没有问题！所有数据都在

自动备份

要自动备份，就不能手动输入repository密码了

restic支持指定一个密码文件--password-file

例如

echo 'restic' > ~/resticpasswd
restic -r s3:http://****:**/restic backup <文件或目录的路径> --password-file ~/resticpasswd

restic同样支持环境变量指定密码和仓库

例如

export RESTIC_REPOSITORY="s3:http://****:**/restic"
export RESTIC_PASSWORD="restic"

然后这个备份命令就变得更省事了

restic backup <文件或目录的路径>

restic结合Cron自动备份

每天凌晨一点备份一次，备份保留近七天的镜像

crontab -e
0 1 * * * /usr/bin/restic  backup  -q /home/****/**_postgresql; /usr/bin/restic forget -q --prune --keep-within 7d

删除策略参考官方文档根据策略删除快照