Сжатие архивов в 90 раз: как аппаратный ускоритель Huawei меняет правила игры в резервном копировании
Компания Huawei представила аппаратный ускоритель для систем хранения данных, предназначенный для резервного копирования Huawei OceanProtect. Устройство использует «алгоритмы HZU для глубокого сжатия с коэффициентом до 90:1», что, по заявлению производителя, на 20 % превосходит показатели лучших конкурентов. Об этом сообщает Blocks & Files. Кроме того, Huawei утверждает, что это единственное в отрасли решение с эффективной гарантией ёмкости, «которое исключает необходимость оценки коэффициента компрессии».
Huawei применяет комбинацию многоуровневой встроенной дедупликации данных с блоками переменной длины (VLD) и сжатия на основе свойств, дополненного компактизацией на уровне байтов, при работе с резервными копиями. Обычно такие данные отличаются высокой степенью избыточности, особенно это заметно при выполнении ежедневных полных снимков виртуальных машин.
Семейство алгоритмов сжатия HZU (HZBC), созданное инженерами Huawei, включает «быстрое нелинейное преобразование и упрощённый метод прогнозирования контекста». По заявлению компании, эти алгоритмы способны достигать результатов, превосходящих LZ-алгоритмы, и повышать коэффициент сжатия примерно на 30 %.
Источник изображения: Tim Johnson / Unsplash
По мнению Blocks & Files, применяется четырёхэтапная схема компрессии:
- Предварительная обработка для очистки данных.
- Многоуровневая встроенная VLD.
- Сжатие HZBC.
- Компактизация на уровне байтов.
Huawei запатентовала используемые алгоритмы дедупликации и сжатия. Технология предусматривает выбор алгоритмов сжатия, наиболее подходящих для резервного копирования конкретных типов данных, при этом фактический коэффициент сжатия зависит от типа приложения и политики резервного копирования.
Сообщается, что аппаратный ускоритель освобождает до 22 % ресурсов центрального процессора системы хранения данных. Так как в системах OceanProtect применяются All-Flash-накопители вместо более доступных по цене дисков, то чем выше эффективность сжатия, тем это выгоднее. Huawei использует QLC-накопители с выделенной адаптивной SLC-зоной для работы с «горячими» данными и ускоренного восстановления информации. У Everpure также имеется аппаратный ускоритель DirectCompress Accelerator на базе FPGA, предназначенный для сжатия данных в реальном времени и снижения нагрузки на процессор хранилища.
Линейка продуктов Huawei включает системы OceanProtect X3000, X6000 и E8000. Кроме того, недавно были представлены модели Huawei X8100 и X9100. Более старые системы, основанные на технологиях сжатия предыдущих версий, обеспечивали коэффициент сжатия до 72:1. При этом новые системы работают ещё и на 50 % быстрее. Также подчёркивается, что OceanProtect X8100 гарантирует защиту от программ-вымогателей на уровне 99,99 %.
Источник: