Ajasponsorship.jpg

Домашний RAID за 700$

Домашний RAID за 700$

Статья предоставлена сайтом colorist.pro


У многих пользователей, которые работают в постпродакшене, рано или поздно возникал вопрос, как и с помощью каких технических решений организовать «Рейд» чтобы он соответствовал определенным критериям, был подешевле, покачественнее, и чтобы скорость была достаточно хорошей для работы с HD, а то и 2к. Я, проработав достаточно много лет в сфере продакшена и постпродакшена, периодически сталкивался с различными решениями. Но они или были слишком дорогими, или наоборот дешево и как следствие не качественно. Однако сегодняшний обзор будет посвящен именно Рейд-массиву, который смело можно рекомендовать для всех бюджетных решений, и которые могут позволить себе фрилансеры. Также данное устройство подойдет и небольшим студиям, у которых нет финансовой возможности для больших инвестиций в Рейд-массивы.

Итак, представляю вашему вниманию Tower RAID модель (TR4X-HA) от компании SansDigital. Так как эта статья не является рекламой, то иллюстрации будут из личного архива. Итак - вот почему я решил выбрать это устройство. Устройство выбиралось по следующим параметрам:
1. Необходимо чтобы массив создавался на уровне BIOS
2. Чтобы была поддержка всех используемых мною систем (OSX, Window, Linux) 3. Чтобы был высокоскоростной интерфейс передачи данных (больше чем может позволить себе esata)
4. Важно чтобы создание массива могло быть различных уровней 0, 1, 0+1, 5, JBOD
5. Компактные размеры и мало шума 6. Была поддержка дисков большого объема (более 1.5Тб)

Вот такой был перечень основных требований, и конечно же, требование последнее, но крайне важное:
7. Цена, которую я готов был выделить из своего бюджета, должна быть не более 600-700 $

Я начал штудировать глобальную всепоглощающую сеть Интернет  и по прошествии нескольких дней «пути» натолкнулся на вышеуказанный девайс )) Конечно, я не мог его ни посмотреть, ни пощупать, а уж тем более испытать, живя «в центре планеты всей» - в Москве. Таким образом, обратившись к своему «старому другу» - аукциону eBay. (Естественно североамериканского происхождения, т.е. ebay.com) И что существенно порадовало: цена и «вариации на тему» были столь разнообразными, что аж глаза разбегались... Но нужно было определяться, так как времени на раздумья было достаточно ограничено. После еще одного дня тщательных исследований, было принято решение о приобретении данного массива. Конечно, главное, чем подкупило меня данное устройство, это демократичная цена. Менее 400$ с учетом доставки. Было также приятно, что производителем было обещана поддержка всех необходимых мне типов Рейд-массивов, для меня было также важно, что все это хозяйство было сделано «под ключ», что означало необходимость покупки только нужных мне по объему дисков. Покупка была совершена, посылка была отправлена через один день (Как покупать различные полезные штуки у «старого-друга» я могу описать позже, например на форуме...).
Прошло 12 дней и купленная мной «штуковина» была вручена мне курьером EMS-Почта России.
И вот, наступил момент трепетный и важный:  встреча нового обитателя моего подстольного пространства (так как на столе места просто нет).
Коробка с Массивом была очень добротно упакована. Внутри я нашел следующую комплектацию: 

IMG_0426.jpg    
IMG_0428.jpg
 
1. Бокс (черного цвета)
2. Плату рейд-контролера pci-e для связи Бокса и Системного блока компьютера
3. Кабель длиной 1м (был бы длиннее - поставил бы на стол этот массив)
4. Диск с драйверами и инструкциями 5. Набор крепежных элементов
6. Планку для адаптации платы рейд-контролера под низкопрофильные корпуса.
А также было хорошее предчувствие, что все будет хорошо!

IMG_0424.jpg

В этот же день были приобретены жесткие диски Hitachi, модель - 7К3000, интерфейс - SATA III (поддержка до 6Gb/s), объем - 2Тб
После распаковки я обратил внимание на простоту и качественное исполнение данного бокса. 

IMG_0437.jpg

IMG_0436.jpg

Также порадовали хорошие амортизирующие ножки. 
IMG_0435.jpg
 
Единственное к чему бы я мог придраться, так это к гламурному глянцевому кожуху, уж очень глянцевый он, но раз raid будет стоять под столом, то это уже не столь актуально.  

IMG_0431.jpg

После ознакомления с внешним состоянием, я приступил к простейшей сборке, которая длилась не более 4 минут для бокса (снять кожух, вставить и закрепить HDD) и 5 минут на установку платы рейд-контролера. Общее время приведения в боевую готовность составило 9,5 минут, с чем я сам себя и поздравил!

Первый запуск:

При включении компьютера и прохождения тестирования основных параметров BIOS, появляется меню, где говорится, что нажатие Ctrl+H переведет вас в режим настройки рейда.
Меню настройки ОЧЕНЬ простое:
1. Вам необходимо отметить те жесткие диски, которые будут участвовать в процессе создания Рейда.
2. Потом вы должны выбрать там создание Рейда (0,1, 0+1, 5, JBOD)
3. Затем выбрать уже из выбранных в п.1 дисков те, которые вы включаете в Рейд
4. (В режиме Рейд 5 вам также предложат выбрать режим записи Write Back или Write Through)
5. (Также в режиме Рейд 5, вам предложат выбрать создание массива с инициализацией в фоновом режиме или без инициализации как таковой)
6. И нажать на кнопку Создать.

Для начала я создал самый простой тип Рейд 0 (Stripe) времени для создания понадобилась 1 минута (с момента входа в режим настройки Рейда), После чего я вышел из настроек и загрузка компьютера продолжилась. (моя тестовая станция построена на Хаке).
В результате загрузки ОС, системой было выдано уведомление, что обнаружено новое не инициализированное устройство, после чего я был отправлен в дисковую утилиту, где просто отформатировал ОДИН Хард (не 4, так как в этом и есть прелесть аппаратного рейда). После форматирования, этот диск стал видимым во всех используемых мною операционных системах.(OSX, Linux, Windows). Далее была проверена его производительность в синтетическом тесте от компании AJA, и в программах Apple FCP и Autodesk Smoke.

AJA-тест выдал следующие результаты: 
  
2.png  

Final Cut позволили мне без особого труда работать в Мультиклипе 14 источников формата SD, Autodesk Smoke выдал результат производительности файловой системы с материалом HD 1080p 25 к/с = 57 fps, плюс было проведено обычное копирование 100 файлов, общим объемом около 1Тб (копировал с другого рейда - скорость там более 700МБ/с). Результат меня, прямо скажу, впечатлил, среднее значение 460 МБ/с! Тесты конечно радуют, но работать в реалиях нашего нестабильного технологического мира с Рейд-0 крайне неблагодарное занятие, особенно учитывая, что в один «прекрасный» момент можно потерять все 8Тб нужной информации.
Принимаю решение переделать рейд-0 в рейд-5. Перезагрузка, вход в настройки, при создании рейда-5 была выбрана инициализация в фоновом режиме, при этом режиме работать с рейдом можно было сразу.

Повторяю тестирование:  

3.png
 
Как видим, скорость существенно (на 30%) просела, однако FinalCut по-прежнему энергично проигрывает мультиклип из 14 потоков в SD качестве, что же касается Autodesk Smoke, то и тут скорость массива опустилась до 44 fps в режиме HD 1080р, а скорость копирования данных в операционной системе составила 280 МБ/с.
Я хотел уже делать выводы, как вдруг обратил внимание, что рейд массив чем-то загружен, я вспомнил, что в настройках выбрана функция создания массива в фоновом режиме и сразу стало понятно, куда делись 30% производительности. На весь процесс создания массива ушло 8 часов компьютерного времени, что для 6Тб(+2Тб в резерве) и для бюджетной карты рейд-контролера достаточно неплохо (другой мой контроллер, превышающий цену этого в 2 раза, создал аналогичный рейд за 4.5 часа).
После полной инициализации: AJA-тест показал просто удивительные результаты:

4.png

Apple FCP не рассматривал (и так понятно), а вот Smoke выдал уже 56 fps!!! Равно как и копирование материала показало скорость 430 МБ/с.

Итак, подподим итоги тестирования и соответствия требованиям:
1. Необходимо, чтобы массив создавался на уровне BIOS - Исполнено
2. Поддержка всех используемых мною систем (OSX, Window, Linux) - Исполнено
3. Высокоскоростной интерфейс передачи данных (больше чем может позволить себе esata) - Исполнено и доказано
4. Возможность создания массива различных уровней 0, 1, 0+1, 5, JBOD - Работает
5. Компактные размеры и мало шумит - Размеры компактные и отсутствует внешний б/п. Шума ОЧЕНЬ мало... даже если поставите на стол. Причина этого - всего один вентилятор размером 10-12см.
6. Поддержка дисков большого объема (более 1.5Тб) - Проверил на 8Тб и все отлично
7. Цена должна быть не более 600-700 $ - Цена 320$ + доставка + 380$ 4xHDD = 700$ ЗА ВЕСЬ РЕЙД (а сумма предполагалось только за бокс и плату), значит условие выполнено полностью..

Из минусов можно отметить:
- глянцевый корпус, на котором видны отпечатки пальцев (если он черный)
- отсутствие стандартной вилки (только американский стандарт), но благодаря
стандартному разъему на боксе, к нему подходит обычный трех-пиновый кабель для блоков питания. 

IMG_0433.jpg  

IMG_0430.jpg


Итак, выводы.
Считаю крайне интересным и полезным подобное решение, я рекомендовал бы его всем кто действительно нуждается в рейд-массиве, для монтажа, грейда, композа, и так далее. Этот массив позволит за вполне разумные деньги существенно повысить скорость работы с материалами различных форматов. А если этого кому-то покажется мало (объема или скорости), то у компании SansDigital есть и другие, более емкие решения... Например, на 8 Хардов и с другой платой-контроллером, что даст реальную производительность около 700-750 МБ/с, чего с лихвой хватит для нескольких потоков 2к.

С уважением, Александр Прохорушкин.




Об авторе: Alex  Prohorushkin
Работаю активно и целеустремленно. Нахожусь в постоянном процессе повышения квалификации.
07.04.2011 06:47:23
Хорошая статья. Инересный опыт.

Я правда по другому решил этот вопрос.
Сначала (~2005) купил внешний рейд на 5 дисков с интерфейсами eSATA, FireWire-800, USB2. Внутри 5 дисков по 500Гб собраны в RAID-5 2Tb - сейчас используется для TimeMachine. Небольшлй WD My Book Studio Edition 2 (~2007) - 2TB RADI-0 из двух дисков, eSATA, Firewire-800, USB2 - часто беру с собой на съёмки или просто оперативный.
В какой-то момент пришел к выводу, что оба таких рейда хорошо, но желательно иметь один большой, может не такой быстрый и собрал сервер (~2009).
FreeBSD 8 + ZFS zraid 13.5Tb (raid5 из 10 х 1.5Tb 5900rpm), используется как файлсервер, иногда еще по iSCSI работаю, но по iSCSI выделен раздел в 2Tb, зато FinalCut может по сети кэпчурить на него smile:) Узким местом является гигабитная сеть, но несколько потоков ProRes вполне тянет. В принципе на сервере два канала по гигабиту и на других машинах монтировали одновременно еще и DV под виндой, тоже работает без особых проблем. А вот ProTools пытались запустить - не захотел, для него критична не столько скорость передачи, сколько время отклика.

Ваш вариант показывает отличную скорость, но к сожалению ахилесовой пятой здесь служит свой интерфейс, не так удобно как универсальный интерфейс, более критично в случае восстановления. Но в любом случае для тех кому некогда ждать внешние рейды на lights peak или когда на маках появится USB3 очень полезный обзор.
07.04.2011 22:19:51
07.04.2011 22:28:42
Вообще интересны в ближайшем будущем решение вроде Promise Pegasus Thunderbolt™
http://www.promise.com/storage/raid_s...40&rsn3=47

Light peak (Thunderbolt) может сделать доступным даже для ноутбуков такие решения, которые были доступны только на рабочих станциях с FC smile:)

Кстати, будут ли свичи для Thunderbolt? Будут ли хранилища поддерживать одновременный доступ разных пользователей? smile:)
07.04.2011 22:36:50
Да, всё будет.
На набе официально объявят.
07.04.2011 22:43:20
Что-то этот NAB обещает быть фееричным! smile:)
Почта завалена всякими новостями полезными и не очень.

Вот к примеру от Iridas узнал о фильме Pina 3D, хочу теперь посмотреть хотя бы в 2D, а стерео вообще было бы здорово! Пока не нашел в онлайне где можно купить blu-ray disc smile:)
07.04.2011 22:55:01
ага, эротично smile:D
27.04.2011 07:52:07
Самое возбуждающее это с самого NAB анонсы железок smile:)
YNUS
09.04.2011 06:47:31
Спасибо за описание и тесты.
Юрий
16.04.2011 23:28:02
Спасибо за решение. Начал смотреть на сайте и так понял, что интерфейс SAS? Интересно, на сколько упадет скорость, если купить модель с esata интерфейсом?
25.04.2011 10:24:39
подскажите вот такой нюанс: правильно ли я понял, что этот рейд массив будет работать только с тем компом, на котором установлена его карта, или даже вообще только с одним компом, с которого производилось форматирование?

просто мне нужен массив для подключения его к мак-буку во время выездов, а потом подключать его к большому компу для монтажа, этот вариант мне подойдет? или может посоветуете что-нить?
25.04.2011 13:05:16
будет работать с любым компом, к которому он оподключён, без привязки к операционной системе и тд
25.04.2011 21:35:58
понял, а тогда для чего вставлять PCI-карту в комп? она только увеличивает скорость обмена данными или все же как-то ограничивает в действиях? вы могли бы опробовать ее с другими компами и рассказать о результатах?)) было бы здорово.
27.04.2011 07:48:44
PCI карта = интерфейс контроллера.

Если у Вас macbook pro с Thunderbolt, то нужно смотреть в эту сторону, в ближайшее время обещают несколько решений на базе этого интерфейса. Если более старый macbook pro, то лучше ieee-1394 или Express/34 eSATA контроллер + RAID с eSATA. Таких решений сейчас много.

27.04.2011 10:22:02
я вот сейчас хочу покупать новый мак-бук про, соответственно значит будет Thunderbolt. Вся засада в том, что чтобы покупать рейд-массив нужно понимать каким критериям он должен отвечать, а я о RAIDах узнал вот только когда прочитал эту статью. Подумал, что мне как раз это и нужно. вот теперь и пытаюсь вас расспросить об этом устройстве. Мне самое главное, чтобы я на выезде когда снимаю оцифровывал сразу на рейд через мак бук про, а потом по приезду домой подсоединять его мак про и делать уже окончательный монтаж. Чтобы скорость передачи данных была хорошей, способной "тянуть" мультиклип из 7-ми камер.

Может быть вы меня проконсультируете на этот счет?
27.04.2011 10:26:58
Какой картой будет производится отцифровка и с какого оборудования?
27.04.2011 20:21:30
я не использую карты (наверное), я буду оцифровывать с sony Z7 через файер-ваер с помощью FCP log&capture и все, не использую никакие карты.
27.04.2011 21:08:31
У новых MacBook Pro остался только FireWire-800, так что если будете брать внешний диск или рейд с FireWire, то берите где два разьёма - один к компу, второй к камере.

Не совсем понятно зачем с HDV отцифровывать на площадке, но HDV не требователен к скорости диска, даже если будете писать в Apple Intermediate Codec или ProRes - обычного винта по FireWire будет достаточно.
27.04.2011 23:00:49
оцифровка нужна для первичного быстрого монтажа коротких обзорных роликов, которые будут также на площадке транслироваться через некоторое время.

не совсем понял, как это будет выглядеть: разве оцифровка не идет через комп на внешний накопитель? Вы же предлагаете брать накопитель с двумя разъемами, это получается, что ноут и камера будут подсоединяться к рейд-массиву, тогда как будет проходить управление оцифровкой?
28.04.2011 06:58:07
Интерфейс IEEE-1394 позволяет устройствам между собой без компьютера общаться. Но в данном случае даже если и через комп, то просто у Вас в ноутбуке нет второго разъема (раньше были и fw-400, и fw-800).
Сейчас только IEEE-1394b (FW-800). К этому разъему подключаете внешний накопитель, к внешнему накопителю подключаете камеру. Далее софтом с компа управляете камерой и переносите материал с камеры на винт.
Поток HDV = 25Mbit. Шина даже IEEE-1394a = до 400Mbit. Так что запас более чем.

Внешние диски есть у WD, Lacie, iStor, IOmega, Seagate и наверняка еще куча производителей. Если собираетесь цифровать на площадке обратите внимание на уровень шума вентиляции.
28.04.2011 09:58:52
оу, спасибо за разъяснение!!! буду знать. А вот шум вентиляции как может повлиять на качество оцифровки? звук запишеться? или что? и шум вентиляции у накопителя, т.е. шум вентилятора? я правильно понимаю?
28.04.2011 14:22:38
Может мешать записи звука на площадке, да и в монтажке может не понравится дополнительный шум, просто обратите на это внимание.

Еще советую если есть возможность перед покупкой попробовать тест AJA System Test (http://www.aja.com/products/software/ или прямой линк http://www.aja.com/ajashare/AJASystemTest.zip), но учтите, что новый чистый диск летает, проблемы со скоростью могут возникнуть или на последни 20-10% поверхности диска, или при большой фрагментации диска.

Как вариант не рейда, а просто винта рекомендую Lacie - http://www.bhphotovideo.com/c/product...rface.html
Хорош тем, что питание по FireWire, правда всего 5400 об/м, но зато террабайт.
28.04.2011 14:37:39
понял, приму к сведению обязательно, а по поводу внешнего жесткого диска - спасибо, буду иметь ввиду.
Так, а по поводу AJA вы не могли бы вкратце пояснить, а-то с английским у меня не супер((( буду признателен весьма))
28.04.2011 17:31:59
Тест производительности винта, только не в абстрактных попугаях, а нормальных видеопопугаях smile:)
просто скачайте эту утилитку и запустите, она очень простая и думаю быстро поймете что к чему. Если не разберетесь, то пишите тут.
29.04.2011 10:34:39
оу хорошо, спасибо)))