Bareos: корпоративный бэкап для гетерогенной среды

Bareos (Backup Archiving Recovery Open Sourced) — это форк Bacula, развиваемый независимой командой с 2010 года. Bareos унаследовал архитектуру Bacula и расширил её веб-интерфейсом, поддержкой облачных хранилищ, дедупликацией и улучшенным шифрованием.

Архитектура Bareos состоит из четырёх компонентов:

• Director (DIR) — центральный сервер управления, планирует задания и координирует процессы
• Storage Daemon (SD) — управляет устройствами хранения (диски, ленты, облако)
• File Daemon (FD) — агент на резервируемом сервере, отправляет данные
• Catalog (каталог) — база данных PostgreSQL с метаданными всех бэкапов

Bareos поддерживает бэкап Linux, Windows, macOS, VMware, MySQL/PostgreSQL, LDAP и других систем. Типы бэкапов: полный (Full), инкрементальный (Incremental), дифференциальный (Differential).

Устанавливаем серверные компоненты Bareos на Ubuntu 22.04:

# Добавляем репозиторий
wget -qO- https://download.bareos.org/current/xUbuntu_22.04/Release.key | gpg --dearmor > /etc/apt/keyrings/bareos.gpg
echo "deb [signed-by=/etc/apt/keyrings/bareos.gpg] https://download.bareos.org/current/xUbuntu_22.04/ /" > /etc/apt/sources.list.d/bareos.list

sudo apt update
sudo apt install bareos bareos-database-postgresql bareos-webui -y

Инициализируем базу данных каталога:

sudo -u postgres /usr/lib/bareos/scripts/create_bareos_database
sudo -u postgres /usr/lib/bareos/scripts/make_bareos_tables
sudo -u postgres /usr/lib/bareos/scripts/grant_bareos_privileges

Запускаем службы:

sudo systemctl enable --now bareos-dir bareos-sd bareos-fd
sudo systemctl enable --now apache2  # для WebUI

Веб-интерфейс доступен по адресу http://server:9100. Логин по умолчанию: admin, пароль задаётся при установке.

Пулы томов определяют политику хранения резервных копий — сколько хранить, куда писать, когда переиспользовать. Основная конфигурация в /etc/bareos/bareos-dir.d/.

Создаём пулы для разных типов бэкапов. Файл /etc/bareos/bareos-dir.d/pool/Full.conf:

Pool {
  Name = Full
  Pool Type = Backup
  Recycle = yes
  AutoPrune = yes
  Volume Retention = 90 days
  Maximum Volume Bytes = 50G
  Maximum Volumes = 100
  Label Format = "Full-"
  Storage = File-Storage
}

Файл /etc/bareos/bareos-dir.d/pool/Incremental.conf:

Pool {
  Name = Incremental
  Pool Type = Backup
  Recycle = yes
  AutoPrune = yes
  Volume Retention = 30 days
  Maximum Volume Bytes = 10G
  Maximum Volumes = 200
  Label Format = "Inc-"
  Storage = File-Storage
}

Настройка Storage Daemon для записи на диск /etc/bareos/bareos-sd.d/device/FileStorage.conf:

Device {
  Name = FileStorage
  Media Type = File
  Archive Device = /backup/bareos
  LabelMedia = yes
  Random Access = yes
  AutomaticMount = yes
  RemovableMedia = no
  AlwaysOpen = no
  Maximum Concurrent Jobs = 5
}

sudo mkdir -p /backup/bareos
sudo chown bareos:bareos /backup/bareos

На каждом резервируемом сервере устанавливается File Daemon. Рассмотрим установку для Linux и Windows.

Задание (Job) объединяет клиента, FileSet, расписание и пул томов. Создаём расписание /etc/bareos/bareos-dir.d/schedule/WeeklyCycle.conf:

Schedule {
  Name = "WeeklyCycle"
  Run = Full 1st sun at 02:00
  Run = Differential 2nd-5th sun at 02:00
  Run = Incremental mon-sat at 02:00
}

Задание для бэкапа веб-сервера /etc/bareos/bareos-dir.d/job/web-01-backup.conf:

Job {
  Name = "web-01-backup"
  Type = Backup
  Level = Incremental
  Client = web-01-fd
  FileSet = "Linux-Full"
  Schedule = "WeeklyCycle"
  Messages = Standard
  Pool = Incremental
  Full Backup Pool = Full
  Differential Backup Pool = Differential
  Priority = 10
  Maximum Concurrent Jobs = 1
  Write Bootstrap = "/var/lib/bareos/%c.bsr"
}

FileSet для Linux-серверов:

FileSet {
  Name = "Linux-Full"
  Include {
    Options {
      Signature = SHA256
      Compression = LZ4
      One FS = no
      ACL Support = yes
      XAttr Support = yes
    }
    File = /
  }
  Exclude {
    File = /proc
    File = /sys
    File = /dev
    File = /run
    File = /tmp
    File = /var/cache
    File = /var/tmp
  }
}

Перезагружаем Director и проверяем:

sudo bareos-dir -t   # проверка конфигурации
sudo systemctl reload bareos-dir

# Запуск задания вручную через bconsole
bconsole
*run job=web-01-backup level=Full yes
*status dir

Восстановление — самая важная операция. Bareos поддерживает восстановление отдельных файлов, каталогов и полное восстановление на тот же или другой сервер.

Восстановление через bconsole:

bconsole
*restore
# Выберите тип восстановления:
# 5: Select the most recent backup for a client
# Выберите клиента и файлы для восстановления

# Восстановление конкретных файлов
*restore client=web-01-fd where=/tmp/restore
cd /etc/nginx
mark *
done
yes

Восстановление на другой сервер:

*restore client=web-01-fd restoreclient=web-02-fd where=/tmp/restore
# web-01-fd — откуда берём бэкап
# web-02-fd — куда восстанавливаем

Проверка целостности бэкапа:

*verify job=web-01-backup level=VolumeToCatalog

Список всех бэкапов клиента:

*list jobs client=web-01-fd
*list files jobid=123

Для корректного бэкапа баз данных необходимо использовать pre/post-скрипты, которые создают дамп перед началом резервного копирования.

Плагин для PostgreSQL — конфигурация FileSet:

FileSet {
  Name = "PostgreSQL-Dump"
  Include {
    Options {
      Signature = SHA256
      Compression = LZ4
    }
    Plugin = "python3"
              ":module_name=bareos-fd-postgresql"
              ":db_host=localhost"
              ":db_user=bareos"
              ":db_password=BareosDBPass"
  }
}

Альтернативный подход — RunScript:

Job {
  Name = "mysql-backup"
  Type = Backup
  Client = db-01-fd
  FileSet = "MySQL-Dumps"
  RunScript {
    RunsWhen = Before
    RunsOnClient = yes
    Command = "/usr/local/bin/bareos-mysql-dump.sh"
  }
  RunScript {
    RunsWhen = After
    RunsOnClient = yes
    Command = "rm -f /var/lib/bareos-dumps/mysql/*.sql.gz"
  }
}

Скрипт /usr/local/bin/bareos-mysql-dump.sh:

#!/bin/bash
DUMP_DIR=/var/lib/bareos-dumps/mysql
mkdir -p $DUMP_DIR

for DB in $(mysql -e 'SHOW DATABASES' -s --skip-column-names | grep -Ev '^(information_schema|performance_schema|sys)$'); do
    mysqldump --single-transaction --routines --triggers $DB | gzip > "$DUMP_DIR/$DB.sql.gz"
done