353

В Страсбурге сгорел дата-центр OVH SBG21

10 марта в 02:42 по московскому времени облачным провайдером OVH было опубликовано оповещение о деградации сервиса в дата-центре SBG1 в Страсбурге, которое позже было дополнено информацией о пожаре в здании SBG2:



"В настоящее время в нашем центре обработки данных в Страсбурге произошел серьезный инцидент, связанный с пожаром в здании SBG2. Пожарные немедленно прибыли на место происшествия, но не смогли справиться с возгоранием в SBG2. Все здание было изолировано, что влияет на все наши услуги на SBG1, SBG2, SBG3 и SBG4. Если ваш сервис хостится в Страсбурге, мы рекомендуем активировать План аварийного восстановления. Все наши бригады полностью мобилизованы вместе с пожарными. Мы будем держать вас в курсе по мере поступления дополнительной информации."



SBG2 является частью кампуса SBG, состоящего из 4 ЦОД. В SBG2 предоставлялись услуги аренды выделенных серверов (dedicated) и облачные сервисы. И если облачным сервисам OVH должен был обеспечивать резервное копированием своими силами, то для арендаторов выделенных серверов эта ситуация в отсутствии резервных копий может быть фатальной.

Тем временем real-time мониторинг доступности выделенных серверов в SBG2 рапортует о полной доступности всего оборудования в ЦОД. Вероятно, сервера мониторинга располагались в том же дата-центре.

Среди облачных провайдеров, не входящих в "большую тройку" (AWS, Azure и Google Cloud), OVH является одним из наиболее популярных. Большинство из 27 дата-центров OVH расположены в Европе. Последняя крупная авария у OVH также произошла в кампусе SBG в 2017 году. В результате отключения электроэнергии весь кампус SBG был отключен. Сорок минут спустя другой кампус RBX (Рубе, Франция) потерял связь из-за несвязанной ошибки программного обеспечения в сетевом оборудовании.

Сочувствуем всем проектам, у кого сервера находились в данном дата-центре, а остальным напоминаем про давно известный чек-лист:


Храните бекапы в (сберегательных кассах) отдельных дата-центрах;

Периодически проверяйте работоспособность своих бекапов;

Имейте наготове план аварийного восстановления доступности сервиса.

UPD: В 9:20 по московскому времени пожар закончился. Судя по сообщениям Octave Klaba (основателя и владельца OVH) в Twitter, в связи с близким расположением зданий дата-центров SBG1, SBG3 и SBG4 к сгоревшему SBG2, пожарным пришлось их "охлаждать", в связи с чем в настоящий момент отсутствует доступ в эти здания и работа данных ЦОД сегодня восстановлена быть не может.



Источник: https://habr.com/ru/news/t/546264/

Вы смотрите срез комментариев. Показать все
5
DELETED
Автор поста оценил этот комментарий

Если кто не в курсе, то есть такая замечательная утилита RSYNK

Она позволяет делать бекапы 1/1. То-бишь синхронизирует данные как локально так и по сети.


Преимущество ее в том, что она копирует только те файлы которых нет в бекапе и удаляет из бекапа те файлы которые были удалены в исходнике.

Благодаря этому принципу вам не нужно прокачивать через сеть сотни гигабайт бекапа, а только лишь те данные которые появились за период работы.

раскрыть ветку (15)
9
DELETED
Автор поста оценил этот комментарий

@moderator, очень серьезная ошибка в тексте.

RSYNK надо заменить на RSYNC иначе будет всё плохо.

5
Автор поста оценил этот комментарий

Смысд такого бекапа, что при удалении файла с оригинала, утилита удаляет и копию? Нужно версионирование файлов.

раскрыть ветку (12)
1
DELETED
Автор поста оценил этот комментарий

можешь и не удалять. Опций много.

Можешь файлы по хешу сравнивать.

Вариантов масса.


самое основное это синхронизация.

Если у тебя проект 500гб. А за день прибыло всего 50. То забекапится только 50.

раскрыть ветку (11)
4
Автор поста оценил этот комментарий

таки вы изобрели блочный инкрементный бэкап )

даже виндоус умеет это делать уже лет 20.

раскрыть ветку (3)
1
DELETED
Автор поста оценил этот комментарий

тут речь идет больше о линуксе. Многие пренебрегают. Или того хуже доверяют бекап самому хостеру, в итоге он лежит в том же дата центре. Или совсем плохо делают бекап на свободном месте диска этого же сервера .


В реальности бекап надо делать на серверах в разных локациях, чтобы пожар, землетрясение или другой катаклизм не уничтожили твой сервер вместе с бекапом.

раскрыть ветку (2)
0
Автор поста оценил этот комментарий

у меня ДВАЖДЫ был пример из практики, когда крыша здания протекала чётко над серверной комнатой.

в обоих случаях потом директоры размещали NAS с репликой бэкапа у себя дома )

раскрыть ветку (1)
0
DELETED
Автор поста оценил этот комментарий

вот тут я написал о своем отношении к бекапам

#comment_194720117

Автор поста оценил этот комментарий

Я мало признаться с этой утилитой работал, но чувствую скоро придется)

раскрыть ветку (6)
1
Автор поста оценил этот комментарий
Veeam наше всё. Бекапит и реплицирует даже работающие виртуалки.
0
DELETED
Автор поста оценил этот комментарий

Кстати. У меня все проекты не только бекапятся в другую локацию, но еще и уведомления об успешности/неуспешности в телеграм прилетают.


В итоге когда я могу спокойно валяться на пляже и в случае чего у меня телефон тревожно дзынкнет если какой из бекапов не удался или весело прозвенит если с ними всё хорошо.

А если датацентр сгорит, то телефон в назначенное время промолчит, потому-что сигнал послать некому.

раскрыть ветку (3)
Автор поста оценил этот комментарий

А что париццо...если усё пропало))

раскрыть ветку (2)
0
DELETED
Автор поста оценил этот комментарий

Да пусть горит. У меня бекап в другой стране лежит.

раскрыть ветку (1)
Автор поста оценил этот комментарий

Вот именно)

0
DELETED
Автор поста оценил этот комментарий

Бекап надо делать самому и на сервер находящийся в другой локации от исходника. Вероятность возгорания обоих намного ниже.


И вот эта утилитка, поставленная на крон, решает очень много проблем.

0
DELETED
Автор поста оценил этот комментарий

Syncthing такая же

Вы смотрите срез комментариев. Чтобы написать комментарий, перейдите к общему списку

Темы

Политика

Теги

Популярные авторы

Сообщества

18+

Теги

Популярные авторы

Сообщества

Игры

Теги

Популярные авторы

Сообщества

Юмор

Теги

Популярные авторы

Сообщества

Отношения

Теги

Популярные авторы

Сообщества

Здоровье

Теги

Популярные авторы

Сообщества

Путешествия

Теги

Популярные авторы

Сообщества

Спорт

Теги

Популярные авторы

Сообщества

Хобби

Теги

Популярные авторы

Сообщества

Сервис

Теги

Популярные авторы

Сообщества

Природа

Теги

Популярные авторы

Сообщества

Бизнес

Теги

Популярные авторы

Сообщества

Транспорт

Теги

Популярные авторы

Сообщества

Общение

Теги

Популярные авторы

Сообщества

Юриспруденция

Теги

Популярные авторы

Сообщества

Наука

Теги

Популярные авторы

Сообщества

IT

Теги

Популярные авторы

Сообщества

Животные

Теги

Популярные авторы

Сообщества

Кино и сериалы

Теги

Популярные авторы

Сообщества

Экономика

Теги

Популярные авторы

Сообщества

Кулинария

Теги

Популярные авторы

Сообщества

История

Теги

Популярные авторы

Сообщества