Для ЛЛ: Системное администрирование – это про управление сервисом, а не только про провода и RAID PENALTY
В комментариях к прошлой статье спросили, «зачем брать СХД на петабайт».
Отвечу чуть подробнее.
Коротко:
Совершенно не обязательно покупать СХД «со всеми дисками максимальной емкости во всех слотах», и вовсе не обязательно покупать СХД с одинаковыми дисками.
Длинно:
СХД «теоретически и механичеки» штука очень простая.
Внутри:
Диски, кабеля, блоки питания
Здоровый бекплейн, то есть плата расширения под диски.
1-2-4-8 независимых контроллера, работающие в одном из трех режимов:
Активный – пассивный, когда обработка данных идет только на одном контроллере
Активный – не совсем активный, и на этом стоит остановиться чуть подробнее.
Когда вы работаете с СХД, вы работаете не с дисками напрямую, а с отображаемой емкостью, Logical unit. У него есть номер, Logical Unit Number, LUN. Это старая, очень старая терминология из времен SCSI (жив, здоров).
Если с этой емкостью (LUN) может работать только один контроллер, и второй ее только показывает, но фактически данные на нее записывает только один контроллер, то SAN сетка будет показывать, что к этому LUN идет два маршрута:
активный и оптимизированный, и
активный, но не оптимизированный.
Active Optimized (AO) и Active Non-Optimized (ANO). Все вместе называется ALUA—Asymmetric Logical Unit Access.
И, конечно, нормальный вариант с двумя (и более) активными контроллерами (формально, внутри все равно своя магия и прочие шины с кешами)
У СХД есть свой софт. Он живет или на маленьком отдельном внутреннем рейде (флешке), или и на флешке, и первых 2-4 дисках, отбирая у них пару сотен мегабайт. Или иначе размазан по общей емкости.
Поэтому (и не только поэтому) у некоторых СХД есть «минимальное количество дисков при поставке». У некоторых нет.
Поэтому (и не только поэтому) на СХД диски, иногда, продаются по 4-6 штук, "набор для расширения".
Совершенно не обязательно покупать СХД «со всеми дисками во всех слотах», и не обязательно покупать СХД с одинаковыми дисками. Иногда есть минимальное обязательное количество дисков.
Но есть нюансы. Когда-то «раньше» имело смысл брать 5 дисков на 10.000 оборотов, собирать из них RAID 10 и иметь 1 диск в запасе, и брать 7 дисков на 7200 оборотов, и собирать из них 6 дисков в RAID 6, и иметь 1 в запасе. Конфигурация не оптимальная, но понятная – 12 слотов в наличии, 5+7 дисков поставили, и только меняем сломанные диски.
Уже лет 15 (скорее, 20), с времен появления виртуальных массивов в HPE EVA и HPE 3PAR, с приходом RAID 2.0, с удешевлением NVME дисков, с ростом скорости для ALL-SSD с NVME over RDMA массивов, с точки зрения управления, и упрощения ведения склада запчастей, проще взять СХД в минимальной конфигурации, и наращивать емкость одинаковыми NVME SSD дисками. Покупаете «сколько надо емкости», потом дополнительную емкость или лицензируете (такое тоже бывает, СХД продается сразу со всеми дисками, но вы платите за емкость), или докупаете. Но нет смысла покупать диски «больше, чем было», поэтому проще (и сравнимо по деньгам) взять СХД на «побольше слотов» и поставить туда SSD «побольше». Не все сразу, конечно же.
Но, повторю еще раз, все зависит от бизнес требований. Можно и в обычный корпус поставить HPM материнку, туда поставить NVME SSD (лучше с (Power Loss Protection, PLP) и раздать их по NFS. Зависит от стоимости простоя, и требований по времени на замену.
Еще один важный момент.
Для СХД «чуть дороже дна» уже есть лист совместимости дисков.
Для СХД уровня «не совсем дно» это не «лист совместимости», но строго «диски от производителя». И только так. Про это надо помнить.
Причина «почему так» очень простая – отсев вендора, и прошивка.
Отсев позволяет вендору СХД выбирать диски из той партии, что прошли какие-то дополнительные проверки с низким уровнем брака.
Прошивка (иногда, не всегда) позволяет производителю реализовывать какой-то дополнительный мониторинг.
И теперь немного еще раз про SDS и HCI (Hyper-converged infrastructure)
Ничего нового тут я не напишу, еще раз сошлюсь сам на себя
Fibre Attached Technology Adapted (FATA)
History of hard disk drives
2010 – First hard drive manufactured by using the Advanced Format of 4,096‑byte sectors instead of 512‑byte sectors
2016: Seagate Launches the Final 15K rpm Hard Drive: RIP 15K HDDs
Introduction to SSD. Part 1. Historical
Ultrastar Data60 & Data102 Specifications
VMware vSphere® Product Line Comparison
Accelerate Your Virtual Network Environment with NSX Powered by SmartNICs
NVME Raid – We Need To Go Deeper, или что там на глубине. GPU over NVME, с водяным охлаждением
Интересно, что русская версия пропала, а как дышали 10 лет назад. Хорошее пособие было, для понимания «как это работает».
Серия «Кудахтеры: захоронение данных»
Виртуализация, SDS, HCI– что это и зачем в 2025 году. vSAN, s2d, NVMe, вот это все еще раз
(там везде свой список литературы, который мне лень переписывать и актуализировать)
Пополняемый список (по мере написания постов) литературы для обязательного чтения
Читать первые 4 пункта именно в таком порядке, по мере выхода книг.
Остальные читать в любом порядке.
«Мифический человеко-месяц, или Как создаются программные системы» (англ. The Mythical Man-Month: Essays on Software Engineering)
Deadline. Роман об управлении проектами
Проект Феникс. Роман о том как DEVOPS меняет бизнес к лучшему
Весь цикл «Рождение советской ПРО»: https://topwar.ru/user/Sperry/
Можно читать даже комментарии, где пишут, что автор ничего не понимает, либерал и вредитель.
Но, среди членов клуба зануд он считается опасным интеллектуалом.