Бэкапы маленького сервера: restic и проверка восстановления
Бэкап, из которого ни разу не восстанавливались, — это надежда, а не бэкап. Расскажу, как устроены бэкапы на моём VPS и как я проверяю, что они действительно работают.
Почему restic
- Шифрование на стороне клиента: хранилищу не нужно доверять.
- Дедупликация: ежедневные снапшоты занимают немного места.
- Один бинарник и понятные команды.
- Работает с S3-совместимыми хранилищами, SFTP и почти с чем угодно через rclone.
Настройка
Пароль от репозитория лежит в файле, доступном только root. Остальное — переменные окружения:
export RESTIC_REPOSITORY="s3:https://s3.example.net/backups"
export RESTIC_PASSWORD_FILE=/root/.restic-pass
export AWS_ACCESS_KEY_ID=...
export AWS_SECRET_ACCESS_KEY=...
restic init # один раз
Сам бэкап:
restic backup /etc /srv /root /var/lib/app/dumps \
--exclude-caches \
--exclude '/srv/*/tmp' \
--tag nightly
Базы данных restic «на лету» не копирует — сначала скрипт делает дамп, и только потом restic забирает готовый файл.
Ротация
restic forget --keep-daily 7 --keep-weekly 4 --keep-monthly 6 --prune
Хранятся семь последних ежедневных снапшотов, четыре еженедельных и шесть ежемесячных. --prune сразу удаляет данные, на которые больше не ссылается ни один снапшот.
Три уровня проверки
Каждую неделю — проверка структуры репозитория и случайной части данных:
restic check --read-data-subset=5%
Раз в месяц — восстановление в отдельную папку и сравнение с оригиналом:
restic restore latest --target /tmp/restore-test --include /etc
diff -r /etc /tmp/restore-test/etc
Пара отличий в файлах, которые поменялись после снапшота, — нормально. Если отличается всё — повод разбираться.
Раз в полгода — восстановление всего сервера на чистую виртуалку. Только эта проверка показывает, что я не забыл ни одного важного каталога. В первый раз оказалось, что забыл: часть ключей лежала в /root, который тогда не попадал в бэкап. Теперь попадает.
Итого
Весь процесс — один скрипт на тридцать строк. Восстановление проверено, а значит, ночью можно спать.