opium: А не сделать ли нам домашнюю файлопомойку на 180 терабайт?
Zerstoren: Вы решили какой-то торрент-трекер скачать? =)
opium: Да порнолаб надо бы скачать на всякий случай
Deeman: Причем, если смотреть только новые ролики и не повторяться, то этого добра хватит далеким потомкам вплоть до XXIII века.
Al1k: С таким-то запасом потомков может и не быть.
Статья основана на практике других людей создаваемых хранилища данных.
Для основы корпуса можно взять Backblaze, жесткие диски можно заменить на 3 или 4 ТБ что даст 135ТБ и 180 Тб общего объёма соответственно.
В разрывной схеме система выглядит как на рисунке ниже.
Схема силовой проводки системы отображена ниже. Блоки питания обеспечивают большую часть своей мощности на двух различных напряжениях: 5 В и 12 В. Используется два блока питания, потому что 45 жестких дисков тянут большую 5-вольтовую нагрузку, все же высокая мощность БП обеспечивают большую часть своей мощности на 12 В. Это не случайно: 1,500 ватт и большее разработаны для мощных 3D видеокарт, которые нуждаются в дополнительной мощности на 12-вольтах. Можно использовать блоки питания предназначены для серверов, но они очень дорогие по сравнению с обычными.
(PSU1) питает платы Sata multiplicator’а 1,2,3,4, и 7, и 3 вентилятора охлаждения. (PSU2) Питает остальные компоненты.
Также Важную часть при расчете мощности блоков питания стоит принять во внимание что при запуске системы, жесткие диски для старта(раскрутки шпинделя) используют большую мощность и ток. Рекомендуется запустить первым PSU1 ожидая пока двигатели жестких дисков раскрутятся, а после запуcкать PSU2, Полностью работающая система будет потреблять приблизительно от 4.5 ампер и до 5.2 ампер.
Также не забывать о применении вибро и звуко поглощающих элементов (резинки и укрепляющие механизмы, что продлит службу ваших жестких дисков и уменьшит шум в помещении.
Схема подключения SATA жестких дисков показана ниже.
В качестве Материнской платы выбрана палат Intel Intel BOXDG43NB
Подсистема SATA включает три карты Syba SD-SA2PEX-2IR PCI Express SATA II с двумя разъёмами каждая и одну Addonics ADSA4R5 4-Port SATA II PCI с 4 разъёмами. Из 10 доступных используются 9 разъёмов, кабели от которых подключены к платам Chyang Fun Industry (CFI Group) CFI-B53PM с пятью интерфейсами SATA на каждой. Выбор решений был ограничен продуктами компании Silicon Image, которые функционируют оптимальным образом. В CFI-B53PM используется чип SiI3726, в Syba SD-SA2PEX-2IR — SiI3132 и в Addonics ADSA4R5 — SiI3124. Поскольку карты Addonics используют интерфейс PCI, скорость передачи данных не высока – всего 25 Мб/с, однако этого оказалось достаточно для потребностей компании, ведь обмен данными между серверами и польхователями происходит по интернет-каналам. 2 Тб дискового пространства могут быть заполнены за день, а весь сервер за месяц. Питание одного 4U обеспечено двумя 760-Вт БП Zippy PSM-5760, при этом один из них предназначен для трёх вентиляторов и пяти плат CFI-B53PM, другому отдано всё остальное.
Программное обеспечение
Storage сервер функционирует под управлением 64-битной операционной системы Debian 4 Linux, использующей файловую систему JFS, а доступ к информации на дисках обеспечивается через протокол HTTPS. Выбор JFS обусловлен необходимостью поддержки больших дисковых ёмкостей, ОС Debian и наличием широкой базы опытных пользователей. В свою очередь, Debian 4 Linux – потому что «вправду бесплатна»,. Для начала с помощью утилиты fdisk был создан один раздел на диск. Затем 15 1,5-Тб устройств были объединены в массив RAID 6 с помощью приложения mdadm и, наконец, отформатированы под JFS с 4-Кб блоками. Итоговое свободное пространство составило 87%. Система работает под Apache Tomcat 5.5 и, как уже упоминалось, протоколом HTTPS. Сервер потребляет ток 4,8 A в простое, а при полной нагрузке – 5,6 А. В качестве процессоров взяты двухъядерные Intel E8600 Wolfdale 3,33 ГГц.
RAID
В системе использоваться RAID 6 он похож на RAID 5, но имеет более высокую степень надёжности — под контрольные суммы выделяется ёмкость 2-х дисков, рассчитываются 2 суммы по разным алгоритмам. Требует более мощный RAID-контроллер. Обеспечивает работоспособность после одновременного выхода из строя двух дисков — защита от кратного отказа. Для организации массива требуется минимум 4 диска. Обычно использование RAID-6 вызывает примерно 10-15% падение производительности дисковой группы, по сравнению с аналогичными показателями RAID-5, что вызвано большим объёмом обработки для контроллера (необходимость рассчитывать вторую контрольную сумму, а также прочитывать и перезаписывать больше дисковых блоков при записи каждого блока)
ниже приведена таблица сравнения RAID массивов
Ниже приведен примерный список комплектующих и цены на них