Дедупликация btrfs. Bees

Обновлено 2023-09-28 2 мин. для прочтения Computer-Science

BEES (Best-Effort Extent-Same) — агент дедупликации btrfs.

Содержание

1 Общая информация

Хеш-таблица с эффективным использованием места, можно использовать всего 1 ГБ хеш-таблицы на 10 ТБ уникальных данных.
Демон постепенно выполняет дедупликацию новых данных, используя поиск по дереву btrfs.
Поддержка сжатия btrfs, дедупликация комбинации сжатых и несжатых файлов.
Постоянная хеш-таблица для быстрого перезапуска после выключения.
Дедупликация всей файловой системы, включая моментальные снимки.
Постоянный размер хеш-таблицы: использование оперативной памяти не увеличивается, если набор данных становится больше.
Автоматическое саморегулирование в зависимости от загрузки системы.

Дедупликация только всей файловой системы.
Требуются привилегии root (или CAP_SYS_ADMIN).
Первый запуск может увеличить использование пространства метаданных, если существует много моментальных снимков.
Постоянный размер хеш-таблицы: использование оперативной памяти не уменьшается, если набор данных становится меньше.
Работает только с btrfs.

Для запуска используем скрипт beesd (в исходниках scripts/beesd).
Посмотрим идентификаторы UUID файловых систем:
```
btrfs filesystem show
```
Активируем демон дедупликации, указав UUID в качестве идентификатора инстанса. Пусть UUID="f8963df3-1320-4bc0-a125-62be185b029e", тогда команда активации будет иметь вид:
```
systemctl enable --now beesd@f8963df3-1320-4bc0-a125-62be185b029e
```

Для работы демона необходим файл конфигурации.
Шаблон для файла конфигурации:
```
/etc/bees/beesd.conf.sample
```
Скопируйте его, задав произвольное имя (например, root.conf):
```
cp /etc/bees/beesd.conf.sample /etc/bees/root.conf
```
В этом файле задайте поле UUID с необходимым значение.
Для запуска необходимо наличие файла с расширением .conf и поля UUID.
Остальные поля конфигурации настраиваются по желанию. В противном случае используются значения по умолчанию.