RAID recovery performance

Проблема

У этого есть три основных причины

• 1 ТБ действительно долго сканируется
• Обработка 3 000 000 файлов требует значительных вычислительных затрат
• При работе с 3 000 000 файлами приходится также беспокоиться и о требованиях к памяти.

Итак, работа началась, и к версии 8.3. сборка 7 достигнуты существенные улучшения. Измерения проводились, главным образом, из любопытства, но тем не менее, они дают представление о скорости.

Настройка тестовой системы

Дополнительные хитрости:

• В настройках размеров кэша в ZAR выбраны минимальные разрешенные значения
• В boot.ini добавили параметр /3GB, что позволило ZAR использовать 3 ГБ виртуальной памяти.

Результаты

Замечания:

⁽¹⁾ В самом лучшем случае, время сканирования массива RAID пропорционально размеру одного из дисков, составляющих массив. В худшем случае, время сканирования пропорционально размеру всего массива.
⁽²⁾ Без учета времени фактического копирования файлов.
⁽³⁾ Начиная с 9-ти миллионов файлов, физическая память кончилась, и начался тяжелый свопинг. Продолжать тестирование в таких условиях было нецелесообразным, но мы все же провели еще один запуск программы, чтобы убедиться в реальной возможности обработки 11 миллионов файлов.

Указания по производительности и характеристикам железа

• Добавить параметр /3GB в файл boot.ini
• Иметь по крайней мере минимум 3ГБ (а лучше 4ГБ) физической памяти
• Убедиться, что есть достаточно места для размещения всех данных с массива

При этих условиях ZAR восстановит массив, содержащий около 12 000 000 объектов (файлов и директорий суммарно). Это абсолютный предел - на томе с числом объектов больше 12 миллионов у ZAR в конце концов кончится память.

С другой стороны, обычный том NTFS (наподобие того, что скорей всего стоит у вас в компьютере дома), содержит не более 500 000 файлов. Для этого типичного случая достаточно 512 МБ физической памяти с небольшим размером кеша, и 1 ГБ памяти хватит при максимальным размере кеша. Большинство современных систем имеют весьма хорошую производительность при восстановлении типичного тома, даже без всяких дополнительных ухищрений.