1673

Яндекс Облако - держитесь подальше

Сегодня у меня были удалены продакш сервера в Яндекс облаке. Без предупреждения и объявления войны. Вот ответ техподдержки


«Сегодня мы проводили технические работы в Яндекс.Облаке. К сожалению, из-за человеческого фактора были удалены виртуальные машины пользователей в зоне ru-central1-c, которые хоть раз находились в статусе SUSPENDED. Мы сразу заметили ошибку и остановили удаление. Увы, некоторые ВМ и их boot-диски были удалены.»


Человеческого фактора, Карл! Мы на амазоне за 10 лет ни один раз не столнулись с человеческим фактором. В облаках! Человеческим! Злости не хватает (бекапы есть, да, но часть данных потеряна)


Update: позвонил руководитель направления. Если кратко: у нас говногод, программисты совершают ошибки, из за этого потерялись данные. Просим понять и простить.

257
Автор поста оценил этот комментарий

Половина серверов...

Иллюстрация к комментарию
раскрыть ветку (1)
81
Автор поста оценил этот комментарий

не, этот чувак гуманнее яндекса, этот половину оставляет.

показать ответы
9
Автор поста оценил этот комментарий

А маркет и карты? Норм штука же. Да и поиск норм...

раскрыть ветку (1)
7
Автор поста оценил этот комментарий
Навигация норм
1
Автор поста оценил этот комментарий

а зачем тогда воспользовались яндексом?

раскрыть ветку (1)
7
Автор поста оценил этот комментарий
Хранение данных в России
показать ответы
0
Автор поста оценил этот комментарий
А что мешало в России только БД оставить?
раскрыть ветку (1)
2
Автор поста оценил этот комментарий
Пинги высоковаты в этом случае
показать ответы
Автор поста оценил этот комментарий

А кроме яндекса датацентров нет?

раскрыть ветку (1)
2
Автор поста оценил этот комментарий
Переехали с Ростелекома. Там тот ещё адок. Через полгода работы их локальный менеджер поинтересовалась, а что такое облачный сервер?
показать ответы
0
Автор поста оценил этот комментарий

А зачем с амазона ушли?

раскрыть ветку (1)
2
Автор поста оценил этот комментарий
Обязанность хранить данные в России
показать ответы
DELETED
Автор поста оценил этот комментарий

Плохо читаете. У вас должны быть данные в России, но за рубежом вам держать никто не запрещает. Т.е. достаточно в России держать актуальный бэкап

раскрыть ветку (1)
1
Автор поста оценил этот комментарий
Объясните это сберу. Российский айпи или никак
показать ответы
1
DELETED
Автор поста оценил этот комментарий

Буфер сервер?

раскрыть ветку (1)
0
Автор поста оценил этот комментарий
Или форварднуть трафик, раньше было меньше проводов
показать ответы
DELETED
Автор поста оценил этот комментарий

Есть Azure, есть AWS. Нет, подавай нам отечественное говно от хуяндекса, который даже на резервные копии скупится.

раскрыть ветку (1)
0
Автор поста оценил этот комментарий
Есть и пользуемся. В этом случае клиент прикрутил биллинг от сбера, а с ним требование только Россия
показать ответы
0
Автор поста оценил этот комментарий
Та ну, если сервера с приложениями где нить во Франкфурте, то все ок с пингами
раскрыть ветку (1)
0
Автор поста оценил этот комментарий
Да, во Франкфурте у нас DO сервера, все норм уже лет пять
4
DELETED
Автор поста оценил этот комментарий

Продакшн, это сферический конь в вакууме. А так косяки бывают у всех.

раскрыть ветку (1)
0
Автор поста оценил этот комментарий

бывают, но чтобы в теории даже иметь возможность зайти в консоль и убить сервера клиентов это довольно круто

показать ответы
0
Автор поста оценил этот комментарий
Если кратко: у нас говнокод, программисты совершают ошибки, из за этого потерялись данные. Просим понять и простить.

И больше не пользоваться.

Пусть программисты-говнокодеры "на кошках" сначала тренируются

раскрыть ветку (1)
0
Автор поста оценил этот комментарий

В том то и дело, яндекс облака перевели в продакшн, все готово, пользуйтесь

показать ответы
DELETED
Автор поста оценил этот комментарий

Поэтому в договорах должны быть штрафные санкции для поставщика услуги в случае его проеба. Или они сначала хотят брать деньги, а потом ни за что не отвечать?

раскрыть ветку (1)
Автор поста оценил этот комментарий
Копейки это
2
Автор поста оценил этот комментарий

Бэкапы-то где хранятся =) ?

раскрыть ветку (1)
Автор поста оценил этот комментарий
Майкрософт азуре
5
Автор поста оценил этот комментарий

Ручками по ftp наше все?

раскрыть ветку (1)
Автор поста оценил этот комментарий
Последнее время перешёл на azcopy.
показать ответы
Автор поста оценил этот комментарий
На хабре такое стоит писать
раскрыть ветку (1)
Автор поста оценил этот комментарий
Там такое не любят
показать ответы
Автор поста оценил этот комментарий

компенсировать трудозатраты за восстановление и ценность потерянных данных они не собираются?

раскрыть ветку (1)
Автор поста оценил этот комментарий
Нет конечно. Да и как оценишь репутацию
показать ответы
6
DELETED
Автор поста оценил этот комментарий

Потому что даже здесь в топе комментарии, что вы сами себе буратины, но тут его вытягивает стая хомячков, "борцунов за справедливость". А на хабре народ более технический, пост в такие минуса уйдет...

раскрыть ветку (1)
Автор поста оценил этот комментарий
Бэкапы не спасают от остановки серверов по причине из удаления
показать ответы
Автор поста оценил этот комментарий

Передавайте привет маилру

раскрыть ветку (1)
Автор поста оценил этот комментарий

тогда, надо еще туда зайти

1
Автор поста оценил этот комментарий

Ну "took offline" это все-таки немножко другое по сравнению с удалением серваков совсем.

раскрыть ветку (1)
Автор поста оценил этот комментарий
Это привело к удалению.
24
Автор поста оценил этот комментарий

Хранить значимые данные в одном экземпляре в облаке?

Да уж...

раскрыть ветку (1)
Автор поста оценил этот комментарий

бекап раз в сутки, дневные данные теряются. Будем чаще, но это нагружает сервер

показать ответы
38
Автор поста оценил этот комментарий

Отказоустойчивость и обеспечивается избыточностью. Именно вы не держали копии сервиса/данных в других зонах и не смогли построить надежный сервис но виноват, почему то, сервис провайдер.

раскрыть ветку (1)
Автор поста оценил этот комментарий
Вопрос целей, можно и репликацию в режиме реального времени. Для веб сервера избыточно в первую очередь в плане финансов
показать ответы
47
Автор поста оценил этот комментарий

Понятно. Запомните одну вещь, никто не даст вам никаких гарантий. Всегда случаются инциденты, вопрос только в том насколько дорого это обойдется. Никакие облака не помогут, да вероятность ниже, но не 100%. Даже если 99.99, вы можете оказаться через неделю в этих 0.001% которым не повезло. Самое правильное - это иметь план действий, даже если на датацентр упадет метеорит.

раскрыть ветку (1)
Автор поста оценил этот комментарий
Пока в памяти только десять лет безупречной работы с облаками амазона
показать ответы
51
Автор поста оценил этот комментарий

Судя по пылающему анусу, у вас такие-же админы. Ну упала часть серверов, почему это проблема? Автоматом поднимаются новые инстансы. Молча и без истерики.

раскрыть ветку (1)
Автор поста оценил этот комментарий
Данные за день потеряны.
показать ответы
104
Автор поста оценил этот комментарий

Вы точно админ? Слишком много эмоций, не единственный оператор у которого подобное происходит. Вы как ошибка выжившего. За 3 года, лично у меня, с амазоном было штук 5 инцидентов.

раскрыть ветку (1)
Автор поста оценил этот комментарий
Нет, директор. Потеря данных у меня была 2 раза. Оба российские провайдеры
показать ответы
57
Автор поста оценил этот комментарий

Исключительно по вашей вине. Потому что ваши админы, видать, слыхом не слыхивали о репликации.

раскрыть ветку (1)
Автор поста оценил этот комментарий
А Яндекс только хотел помочь, да? Для веб сервера избыточно
показать ответы

Темы

Политика

Теги

Популярные авторы

Сообщества

18+

Теги

Популярные авторы

Сообщества

Игры

Теги

Популярные авторы

Сообщества

Юмор

Теги

Популярные авторы

Сообщества

Отношения

Теги

Популярные авторы

Сообщества

Здоровье

Теги

Популярные авторы

Сообщества

Путешествия

Теги

Популярные авторы

Сообщества

Спорт

Теги

Популярные авторы

Сообщества

Хобби

Теги

Популярные авторы

Сообщества

Сервис

Теги

Популярные авторы

Сообщества

Природа

Теги

Популярные авторы

Сообщества

Бизнес

Теги

Популярные авторы

Сообщества

Транспорт

Теги

Популярные авторы

Сообщества

Общение

Теги

Популярные авторы

Сообщества

Юриспруденция

Теги

Популярные авторы

Сообщества

Наука

Теги

Популярные авторы

Сообщества

IT

Теги

Популярные авторы

Сообщества

Животные

Теги

Популярные авторы

Сообщества

Кино и сериалы

Теги

Популярные авторы

Сообщества

Экономика

Теги

Популярные авторы

Сообщества

Кулинария

Теги

Популярные авторы

Сообщества

История

Теги

Популярные авторы

Сообщества