Насколько эффективна дедупликация в Windows Server 2016/2019

[hroft_clone3]

Многие, наверное, слышали такое модное слово - ДЕДУПЛИКАЦИЯ. Что это такое и с чем ее едят знают не все.

Смысл в следующем - на диске наводится статистика по блокам. Находятся общие блоки в нескольких файлах. Эти блоки сохраняются в отдельное место и в каждом файле, где есть сохраненная последовательность блоков, она не повторяется, а ставится ссылка на сохраненную последовательность блоков. А то, что не повторяется, хранится отдельно.
Об эффективности этой технологии говорится много. Наиболее эффективна она для хранения однотипных данных.
Например, бэкапов (Экономится до 60%-80% места), офисных документов (экономится до 30%-50% места). При хранении достаточно случайных данных, эффективность нулевая.

Недавно тут взглянул на то, сколько данных хранится на таком диске, и сколько бы их было без использования этой технологии.
На этом диске хранятся файловые базы 1С




Диск D: - файловые базы 1С - Степень дедупликации 86%

Comments

[lj-frank-bot.livejournal.com]

Здравствуйте!
Система категоризации Живого Журнала посчитала, что вашу запись можно отнести к категории: Технологии (https://www.livejournal.com/category/tehnologii?utm_source=frank_comment).
Если вы считаете, что система ошиблась — напишите об этом в ответе на этот комментарий. Ваша обратная связь поможет сделать систему точнее.
Фрэнк,
команда ЖЖ.

[hroft-clone3.livejournal.com]

Правильно.
Можно и уточнить как IT

[lj-frank-bot.livejournal.com]

Хорошо

[bodeh.livejournal.com]

А потом блок накрывается и вместо одного битого бэкапа получаем жопу.

[hroft-clone3.livejournal.com]

Сейчас и на NASах топового уровня так делают, да давно уже
Например, EMC выпускали NAS с дедупликацией еще лет 15 назад.
Сейчас они объеденились с DELL и продолжают выпускать такие устройства

https://www.delltechnologies.com/en-us/storage/sc-series.htm#scroll=off

Да и с чего полетит блок?
Кто же такие структуры без RAID 10 настраивает?