Как работает дедупликация

Дедупликация в источнике

Когда резервное копирование производится в дедуплицирующее хранилище, агент Acronis Backup & Recovery 10 считывает копируемые элементы — блоки дисков при резервном копировании дисков или файлы при резервном копировании файлов — и вычисляет цифровые метки каждого блока. Эта цифровая метка, часто называемая хэш-значением, уникально представляет содержимое элемента в пределах хранилища.

Прежде чем отправить элемент в хранилище, агент запрашивает дедуплицирующую базу данных, нет ли уже в этом хранилище элемента с таким хэш-значением.

Если да, то агент посылает только хэш-значение элемента. В противном случае посылается сам элемент.

Некоторые элементы, например зашифрованные файлы или блоки дисков нестандартного размера, дедуплицировать невозможно, и агент всегда передает такие элементы в хранилище, не вычисляя их хэш-значения. Дополнительные сведения об ограничениях дедупликации на уровне файлов и дисков см. в разделе Ограничения дедупликации.

Дедупликация в месте назначения

Когда резервное копирование в дедуплицирующее хранилище завершается, узел хранения выполняет задание индексирования для дедуплицирования данных в хранилище следующим образом.

Он перемещает элементы (блоки дисков или файлы) из архивов в специальный файл в хранилище, сохраняя при этом в нем повторяющиеся элементы только один раз. Этот файл называется папкой дедуплицированных данных. Если в хранилище содержатся резервные копии и на уровне дисков, и на уровне файлов, то для них формируется два отдельных хранилища данных. Элементы, которые нельзя дедуплицировать, остаются в архивах.
В архивах перемещенные элементы заменяются ссылками на них.

В результате в хранилище содержится определенное количество уникальных дедуплицированных элементов, на каждый из которых есть одна или несколько ссылок в архивах хранилища.

Выполнение задания индексирования может занять значительное время. Состояние этой задачи можно просмотреть в представлении Задания на сервере управления.

Уплотнение

После удаления хотя бы одной резервной копии или архива из хранилища, как вручную, так и в процессе очистки, в хранилище могут остаться элементы, на которые не ссылается ни один архив. Такие элементы удаляются заданием на уплотнение, которое выполняется узлом хранения по расписанию.

По умолчанию задания на уплотнение выполняются каждое воскресенье в 03:00. График выполнения задания можно изменить, как описано в подразделе «Изменение графика уплотнения» раздела Действия над узлами хранения. Задание можно также запустить или остановить вручную в представлении Задания.

Удаление неиспользованных элементов является ресурсоемкой операцией, поэтому задание на уплотнение выполняется только при накоплении значительного объема подлежащих удалению данных. Пороговый объем определяется параметром конфигурации Compacting Trigger Threshold (Пороговое значение для включения сжатия).