По делу

Последний месяц лета закрываем длинным списком релизов для AI-агентов: документация, MCP-сервер, скиллы, навыки, файлы в чате и четыре новые модели в каталоге. Причина простая: каждое третье обращение к нашей документации — от агентов, нужно считаться с новой аудиторией.

Вторая половина выпуска для тех, кто читает сам: три класса хранения в S3, отмена удаления баз, клон приложения в App Platform, домены через Госуслуги и обновленный Kubernetes.

Разворачиваем каждый пункт ниже ↓

❯ Учиться никогда не поздно

Чем больше задач у агента, тем длиннее системный промпт, а значит, каждое обращение к модели обходится дороже. Чтобы не тратить токены зря, инструкции теперь можно разложить по навыкам — отдельным блокам под конкретные задачи.

Каждый навык состоит из трех частей: название, описание «когда применять» и сама инструкция. В запрос уходит только компактный индекс, а полная инструкция подтягивается, если запрос подошел под условие. Как устроены навыки →

Начать просто: возьмите повторяющуюся задачу вроде оформления отчетов, задайте ей условия и подключите к одному агенту или сразу к нескольким.

Отправить своего агента за новыми навыками →

❯ Вашу панель всем бы показать

Не останавливаемся и продолжаем улучшать панель — в августе три уж очень удобных обновления.

1. Режим стримера. Скрывает в панели все, что не стоит показывать в кадре: публичные IP, баланс, ФИО, телефон, емейл, домены и почтовые ящики. Пригодится, когда снимаете скринкаст, стримите работу или демонстрируете панель на созвоне. Включается в меню профиля справа вверху.

2. Избранное. Разделы панели и ваши серверы, базы, приложения теперь можно закрепить в левом меню — они всегда остаются сверху. Если каждый день начинаете с одних и тех же, искать их больше не придется.

3. Больше прав для дополнительных пользователей. Основной аккаунт теперь может открыть коллеге доступ к «Новостям и идеям» — либо только на чтение, либо с возможностью комментировать, ставить лайки и предлагать свои идеи от своего имени. А если у дополнительного пользователя есть доступ к поддержке, уведомления по тикетам будут приходить ему на почту, как и владельцу аккаунта.

Показать свою панель всем →

❯ 1100 токенов вместо 295 000

Документация должна быть понятной не только для людей, но и для агентов. Вот что сделали для этого.

Отдали агентам чистый текст. Добавили на сайт llms.txt и llms-full.txt, а следом MD-версию всей документации. Файлы вышли слишком объемными, поэтому раздробили их на части. Теперь на страницу уходит около 1100 токенов вместо 295 000.

Убрали обрывы на середине. Подняли рейт-лимиты, чтобы серия быстрых запросов не упиралась в ограничение, и настроили кеширование со всеми заголовками, которые агенты ожидают увидеть. Страницы отдаются из кэша, задача доходит до конца.

Свели HTML и MD к одному содержанию. Выровняли разметку обеих версий: агент читает ровно то же, что видите вы, без расхождений и устаревших кусков.

Показать документацию своему агенту →

❯ Три инструмента вместо каталога

Если документация — это руководство, то MCP-сервер — инструмент, чтобы видеть, создавать, менять и настраивать ваши ресурсы. И инструмент тоже должен быть удобным в работе.

Чтобы не раздувать контекст и расход токенов, мы свели все возможности Timeweb Cloud MCP к трем инструментам:

search_tools — найти нужную операцию по описанию задачи

get_tool_definition — получить ее параметры

execute_tool — выполнить операцию с этими параметрами

Агент больше не держит в памяти весь каталог, а ищет нужное под конкретную задачу. Контекст остается компактным при любом числе методов — поэтому список доступных действий мы смогли заметно расширить. Как подключить MCP-сервер →

А в пару к нему выложили репозиторий со скиллами — готовыми инструкциями, как поднять сервер, настроить DNS или посмотреть баланс. В Claude Code скиллы ставятся как плагин двумя командами, в Cursor, Codex и OpenCode — через npx skills. Забрать скиллы с GitHub →

Дать агенту порулить облаком →

❯ Данные разные — и лежат по-разному

Данные в S3 бывают разные: к одним обращаются каждую минуту, другие годами лежат про запас. Поэтому расширили количество классов хранения в S3 — теперь при создании нового бакета можно выбрать один из трех вариантов.

Премиальный — с тройной репликацией и повышенной производительностью. Подойдет для данных, которые постоянно читают и записывают.

Стандартный — для файлов, к которым обращаются регулярно, но высокая скорость доступа не критична: пользовательских загрузок, медиа и рабочих выгрузок.

Холодный — для архивов, бэкапов и датасетов, к которым возвращаются раз в редко.

Уже созданные бакеты работают на прежних условиях — переносить и пересчитывать ничего не нужно.

Разложить данные по классам →

База, у вас отмена:

Удалить кластер по ошибке проще, чем кажется: во время наведения порядка или выполнив команду не в том окне. У облачных серверов на этот случай уже есть отмена удаления, теперь такая же появилась у баз данных.

С подключенной защитой удаленный кластер не исчезает сразу: он хранится еще 72 часа, и все это время его можно вернуть — с данными, резервными копиями и конфигурацией. Восстановление бесплатное, для всех типов баз и во всех регионах. Условия и порядок восстановления →

Стоимость — 200 ₽ в месяц за одну базу. Если защита не подключена, разовое восстановление стоит 2000 ₽.

Подключается в настройках кластера → «Бэкапы» → «Отмена удаления». У новых кластеров можно включить сразу при создании.

Подстелить базе соломки →

❯ Одно приложение хорошо, а два — лучше

Теперь приложение в App Platform клонируется так же, как облачный сервер. Выбираете нужное, жмете значок справа, проверяете параметры.

По умолчанию все как у исходного приложения. Поменять можно ветку и коммит, конфигурацию с регионом и тарифом, приватную сеть, название, комментарий и проект. Переменные окружения, директория и команда сборки переносятся сами.

Где может пригодиться:

Пользователи в другом регионе. Разворачиваете копию ближе к ним и снижаете задержки.

Подбор конфигурации. Поднимаете клон на других ресурсах и сравниваете с оригиналом — рабочее приложение при этом не трогаете.

Резерв. Держите копию в другой локации и переводите на нее трафик, когда нужно.

Сделать приложение-близнец →

❯ Веб-сервер настраивается в приложении

Запрос от пользователя попадает в приложение не сразу — сначала его встречает веб-сервер. Теперь его параметры настраиваются прямо в приложении.

Редиректы. Перенаправление с одного пути или домена на другой. Пригодится, когда меняете структуру адресов или переезжаете на новый домен и не хотите потерять поисковый трафик.

HTTP-заголовки. Добавляете, меняете и удаляете заголовки в ответах веб-сервера: Cache-Control, CORS, CSP, HSTS. Служебные вроде Server и X-Powered-By можно, наоборот, спрятать.

Сжатие. gzip или zstd: данных передается меньше, страница у пользователя открывается быстрее.

Обработка несуществующего адреса. Только для фронтенд-приложений — показывать главную, как принято в SPA, или вашу страницу 404.

Лимиты для бэкенда. Максимальный размер тела запроса в килобайтах и таймаут ожидания заголовков ответа в миллисекундах: тяжелые запросы и зависшие соединения не копятся.

Покрутить настройки веб-сервера →

❯ Еще один сертификат

В App Platform, помимо сертификатов Минцифры, появился второй корневой сертификат — от Центра сертификации ТЦИ.

Логика та же. Без корневого сертификата приложение не доверяет TLS-сертификатам, выпущенным этим центром, и исходящий запрос упирается в ошибку проверки. Теперь сертификат включается тумблером — при создании приложения или в настройках готового. После изменения приложение уходит на повторный деплой. Подробнее про сертификаты → 

Работает для бэкенд-приложений и развернутых из Dockerfile или Docker Compose. Два сертификата друг другу не мешают: включайте оба сразу или только нужный.

Включить второй сертификат →

❯ Два пути, чтобы все найти

Продолжаем парад AI-релизов — у поиска по базе знаний стало два режима.

Классический — как было раньше: перед каждым запросом по базе идет семантический поиск, найденные фрагменты подмешиваются в контекст модели. Предсказуемо и быстро.

Агентный — модель сама решает, когда и что искать: может уточнить формулировку, сделать несколько поисков подряд, собрать ответ из разных частей базы. На сложных запросах вроде «найди все товары из списка в категории X» разница в качестве заметна.

Базы знаний, которые вы подключали раньше, остались в классическом режиме — переключить можно в настройках агента. Для новых подключений агентный выбирается по умолчанию.

Переключить режим поиска →

❯ Агенту можно передать файл

Скриншот с ошибкой, выгрузка в CSV, лог — теперь все это можно отправить агенту двумя способами.

В телеграме. Файл уходит в чат вместе с запросом: агент сделает сводку по CSV или найдет ошибку на скриншоте с логами. Пригодится тем, у кого агент уже стоит в чате поддержки.

Через API. Files API — отдельный механизм для работы с файлами в API агентов, без прежних ограничений по формату и размеру. Схема простая: пользователь вашего сервиса прикрепил файл в чате → сервис передал его агенту через API → агент ответил с учетом содержимого.

Нагрузить агента файлами →

Пополнения в каталоге моделей:

Добавили четыре модели: Qwen 3.8 Max, Gemini 3.7 Flash, Grok 4.6, GLM 5.3 и GLM 5.3 Flash.

А если вы раньше пользовались AI Gateway, но перестали, до конца года на токены всех моделей действует скидка 20% — повод вернуться и сравнить новинки с тем, на чем работали раньше. Подробнее об условиях →

Перебрать каталог →

❯ Идентификация администратора домена через Госуслуги

Для владельцев доменов .ru и .рф в панели появилась идентификация администратора через Госуслуги — она стала обязательной с 1 сентября. Физлица уже могут ее пройти:

В разделе «Домены и SSL» открываете вкладку «Администраторы» и жмете «Подтвердить данные». Проходите проверку через Госуслуги, и если данные совпали, рядом с доменом появляется отметка. Детали уже в документации →

Для юрлиц идентификацию добавим позже. Отдельный случай — домены .su и домены .ru и .рф, зарегистрированные через R01 или Руцентр: их администраторы проходят идентификацию у этих регистраторов.

Подтвердить данные →

❯ Кластер, который можно пересобрать

Начнем с версий: обновили линейки 1.33, 1.34, 1.35 и 1.36.

Дальше — конфигурация воркер-группы. Она больше не фиксируется при создании: у готового кластера можно перейти на тариф выше или на конфигуратор.

А на случай, когда в нужной локации ресурсы кончились, а кластер нужен именно там, сделали предзаказ. Работает и для новых кластеров, и для добавления воркер-ноды в готовую группу или новой группы целиком. Кластер создастся сам, как только ресурсов в локации хватит.

И обновили CSI-драйвер: в комментарий к диску теперь сам записывается его назначение — например, TWC-CSI, Namespace: default, Name: net-drive-demo. Видно, что это за диск и к чему он относится, не заходя в кластер. Комментарий можно изменить.

Пересобрать воркер-группу →

Всё, что о нас говорят:

Вошли в CNews500, рейтинг пятисот крупнейших ИТ-компаний России.

Рассказали про успехи AI Gateway: 70 моделей через единый API и рост числа пользователей на 40% за август. Плюсом, отдельные локальные модели, а также модели для картинок, синтеза и распознавания речи.

Кейс Metamentor появился и в медиа. Напомним, что Metamentor разрабатывает решения на базе генеративного AI для крупных компаний. CNews рассказали, как компания масштабируется на инфраструктуре Timeweb Cloud — за два года их выручка выросла в 32 раза.

❯ Что читали и лайкали

В августе не изменяли нашим принципам — разбирали все самое интересное, необычное и увлекательное. Все для ваших просмотров и лайков.

Каждое третье обращение к нашей документации — от агента. Михаил Шпаков, наш руководитель разработки, разбирает, почему провайдеров скоро будет выбирать агент, что случится с ценами управляемых сервисов и почему проверку работы агента нельзя поручать самому агенту.

Свой видеохостинг вместо чужого. PeerTube на Debian 12: PostgreSQL, Redis, Nginx, Let's Encrypt, Fail2Ban — и вот у вас площадка, которая по ActivityPub здоровается с соседними инстансами вместо того, чтобы жить в одиночку.

Автоматизируем бэкапы с помощью Terraform. Денис Котов, тимлид Core-команды, показывает, как развернуть систему резервного копирования Bareos и управлять ею как кодом. В облаке хранятся настройки, база данных и сами бэкапы, а на сервере клиента остается только агент для передачи файлов. Достаточно указать четыре параметра — остальное система настроит сама.

Altair 8800, Osborne 1 и телефон весом в килограмм. Вспомнили первые компьютер, ноутбук и мобильник. Дорого, тяжело, неудобно и решительно непонятно, кому это надо. Прошло сорок лет, а вопросы все те же.

Возможно, этот выпуск прочитал не только человек. Если вы не AI-агент — ждем от вас лайк и комментарий.

Вместо долгого начала про июльские отпуска и шуток про жару просто похвастаемся цифрами. Тридцать секунд — столько теперь занимает создание сервера. 2,7 миллиарда — столько объектов лежит в нашем S3. До 12,5 миллионов — столько токенов начисляем на первого AI-агента.

А если серьезно, за месяц у нас: два новых провайдера AI-моделей, обновления в S3, сертификаты Минцифры, приватные агенты, новая площадка для Амстердама и многое другое.

Не сбавляем темп — насыщенный на события июль ниже ↓ 

❯ Масштабируем, пересобираем, ускоряем

Продолжаем заниматься тем, что видно не в панели, а в скорости отклика. В июле взялись за три точки, где инфраструктура упиралась в потолок при росте нагрузки:

1. Очереди задач. Когда вы нажимаете кнопку в панели, задача уходит на ноду и встает в очередь — а расставляет их по приоритетам libvirt. Под высокой нагрузкой очереди забивались, и задача могла зависнуть или отмениться на полпути. Поэтому ускорили изоляцию нод, которые перестали отвечать, и перенастроили политики — теперь действия из панели отрабатывают заметно быстрее.

2. Сетевые диски. За создание, монтирование и подключение отвечает отдельный сервис. Запросов к нему становится больше, и на пиках это было заметно: диск подключался не сразу. Поэтому переработали и сделали архитектуру распределенной — так мощность растет вслед за нагрузкой. Прежнего ограничения по скорости больше нет.

3. Бэкапы. Обновляем парк хранилищ в Москве на более производительное оборудование и заодно приводим все хранилища к единой конфигурации — за счет этого копии создаются быстрее. На весь парк уйдет около двух месяцев, но ждать не придется: хранилища переезжают по очереди, и на уже обновленных бэкапы сразу делаются быстрее. Данные на время работ реплицируются.

Проверить скорость на своем проекте →

❯ Что сделали для 2,7 миллиарда объектов в S3

Посчитали, сколько всего лежит в нашем S3, — вышло 2,7 млрд ваших объектов. Чем их больше, тем важнее удобство работы с ними — за это и взялись.

Сделали предпросмотр 74 форматов. Видео, текстовые файлы, таблицы, документы и презентации теперь открываются прямо в объектном менеджере. Чтобы заглянуть в файл и понять, тот ли это, качать его больше не нужно. Полный список форматов →

Выделили роль «Чтение и запись». С ней сотрудник, сервис или приложение работает только с объектами: читает, загружает, изменяет и удаляет. Настройки бакета и управление хранилищем остаются закрыты — задеть конфигурацию не получится. Остальные роли и уровни доступа →

Добавили CDN в один клик. Из раздела S3 теперь можно сразу создать CDN-ресурс с выбранным бакетом в качестве источника. Там же виден список связанных с бакетом ресурсов и переход в их настройки — статику из хранилища раздаете с ближайшего к пользователю узла, не собирая связку руками. Разложить файлы по бакетам →

❯ Сертификаты Минцифры в один клик 

Российские сервисы вроде API банков и госорганизаций работают с сертификатами Минцифры. Чтобы приложение им доверяло, у него должен быть корневой сертификат. Но в большинстве систем и библиотек его нет по умолчанию, и сертификат приходилось добавлять руками.

Теперь в App Platform он включается переключателем «Сертификаты Минцифры» — при создании приложения или в настройках готового. После включения приложение уйдет на повторный деплой.

Работает для бэкенд-приложений и развернутых из Dockerfile или Docker Compose. Фронтенду сертификаты не нужны. В бэкенд-приложениях сертификат подхватится сам, а для Docker мы кладем в контейнер три файла — доверие настраивается под ваш рантайм. Готовые инструкции для Node.js, Python, Go, JVM и .NET в документации →

Подружить приложение с российскими API →

❯ Железо с большим контролем

Приятно, когда всё железо ваше и ни с кем не делится. Для этого есть выделенные серверы — и в июле управлять ими стало проще.

Интернет-канал и дополнительные IP из панели. Раньше, чтобы сменить канал или заказать адрес, нужно было писать заявку в поддержку и ждать. Теперь всё делается самостоятельно и применяется сразу. Работает для выделенных серверов в Москве и Санкт-Петербурге.

Таб «История». Появился по аналогии с другими сервисами: видно, кто и когда заказал сервер, менял настройки, перезагружал, переключал канал, заказывал и освобождал IP. Если в команде несколько человек с доступом, то будет понятно, откуда взялось изменение.

Забрать себе железо целиком →

❯ Тридцать секунд от клика до сервера

В июне ускорили запуск управляемых сервисов, а в июле дошли до стандартных облачных серверов. Теперь сервер создается за 30 секунд — от нажатия кнопки до готовой машины.

Дело в смене архитектуры. Раньше цепочка операций тянулась через центральный API, теперь на каждом гипервизоре работает свой агент: API ставит задачу → агент выполняет ее на месте и сразу отчитывается. Цепочка стала короче, а независимые процессы идут параллельно, а не по очереди.

Заодно схема стала прозрачной для нас: каждый шаг создания сервера виден на графиках. Если что-то замедляется или сбоит, мы замечаем это по данным и чиним точечно, а не ищем причину по всей цепочке.

Дальше переводим на новую схему остальное: управляемые базы данных, серверы с Windows и установку из образов.

Проверить секундомером →

• GLM 5.2, 4.7 и 4.7 FlashX от Z.ai. Заточены под агентные сценарии — то есть вызывать инструменты и выполнять цепочку действий.

• Kimi от Moonshot. Сильны на длинном контексте: модель держит суть на больших объемах — своде документации, кодовой базе и длинной переписке.

• GPT 5.6 в трех вариантах — Sol, Terra и Luna. Под широкий круг задач: текст, код, цепочки рассуждений.

• Claude Opus 5 и Claude Sonnet 5 от Anthropic — для сложных сценариев и работы с базами знаний.

• Grok 4.5 и Grok 4.3 — когда важен актуальный контекст.

• Qwen 3.7 Max, 3.7 Plus и 3.6 Plus. Max тянет самые тяжелые задачи, Plus держит баланс скорости и качества.

• Gemini 3.6 Flash и Gemini 3.5 Flash с быстрыми ответами без перерасхода бюджета.

• GPT-4o mini TTS, GPT-4o mini Transcribe, GPT-4o Transcribe для синтеза и распознавания речи. Плюс GPT Image 2 — для генерации картинок.

А еще режимы thinking и non-thinking сделали просто переключением, а не двумя отдельными моделями.

И начали отключать устаревшие модели — их уже не поддерживают провайдеры. За две недели до отключения у модели появится плашка на странице агента и в Gateway, а еще напомним письмами. Если у вас пакетный тариф, за неиспользованные токены начислим бонусы.

Перебрать весь каталог →

❯ Одно место для настроек 

Активно разбирали техдолг, чтобы сервисы работали быстрее и предсказуемее. И если большую часть видно не будет, кое-что вы точно заметите — при настройке домена App Platform. 

Раньше редактировать домены приходилось на отдельной странице, вне остальных настроек App Platform. Одна ошибка — и приложение не откроется у пользователей. Поэтому сделали всё во вкладке «Домены» в настройках приложения: просто выбираете уже добавленный домен или вводите внешний. Подробнее о привязке →

Заодно подстраховали в двух местах. Если домен занят другим сервисом, предупредим заранее и после сохранения перепривяжем сами. Если домен внешний, подскажем нужный IP прямо в окне — останется добавить A-запись у регистратора.

Привязать домен в два шага →

❯ Агенты в российском контуре

Добавили в AI Gateway локальные модели: они размещены на серверах в РФ, и трансграничной передачи данных при работе с ними нет. В панели они собраны под фильтром «Локальные» — Qwen 3 235B Instruct, Qwen 3 Coder 480B A35B, Kimi K2.6, GPT OSS 120B и Gemma 4.

А следом появились и приватные AI-агенты — такой агент целиком работает на локальной модели, с базой знаний и интеграциями. Подойдет, если по внутренним требованиям данные не должны покидать российский контур.

Выбрать модель с российской пропиской →

Дайджест раз в месяц, журнал постоянно

Переработали журнал обновлений — теперь по нему можно искать и фильтровать по сервису и по месяцу, вплоть до лета 2024 года. 

Все релизы, изменения и исправления багов собраны в одном месте. Удобно, если пропустили дайджест или хотите проверить, что менялось в конкретном сервисе.

Полистать журнал →

❯ Бэкапов много не бывает

В марте запускали логические бэкапы — вместо снимка всей системы формируется дамп базы и складывается в S3-бакет. А в июле принялись за прокачку физических.

Физические копии баз MySQL и PostgreSQL теперь скачиваются так же, как бэкапы облачных серверов. Пригодится, чтобы держать копию у себя или поднять из нее тестовый стенд.

Положить копию поближе →

Всё, что о нас говорят

Начнем с кейса Metamentor — команда делает AI под заказ и за месяц внедряет его в контур клиента: речевая аналитика, боты поддержки, обработка документов. За два года их выручка выросла в 32 раза, и прежняя инфраструктура за таким темпом перестала успевать — поэтому 80% ее переехало к нам. Подробно разобрали в текстовом кейсе, а кратко — в видео на YouTube, Rutube и в ВК. 

Посчитали, чем малый и средний бизнес пользуется в облаке — картина получилась любопытная. Быстрее всего растет спрос на AI-агентов: в 4 раза за полгода, больше миллиарда токенов в день. Следом идут облачные серверы с GPU, S3-хранилище, бэкапы и Managed Kubernetes. А главное — больше 70% используют сразу два сервиса и больше: облако перестает быть точечным решением и становится единой платформой. 

Поднялись с восьмого на пятое место в рейтинге GPU Cloud 2026 от CNews. Всего в рейтинге 15 провайдеров, сравнивали условия, типы GPU-серверов и ускорителей, стоимость ресурсов и варианты развертывания.

И про агентов —они научились генерировать изображения, искать в интернете и подключаться к инструментам из галереи MCP. Поделились новостью с CNews, TAdviser и IT World.

❯ Что читали и лайкали

Для ваших глаз и лайков от нашей редакции — самое интересное из июльских публикаций.

Разбираемся, как LLM обесценили половину вашего опыта. Михаил Шпаков, наш руководитель разработки, заметил, что разговор про опыт и взгляды на собеседованиях стал различать кандидатов лучше, чем техническая секция. Текст-мнение о том, как модели перекраивают профессию, а вслед за ней и требования к людям в командах.

Открываем тайны самой экзотической видеокарты из 90-х — Intel i740. Первый GPU от Intel обогнал свое время и все равно провалился. Написали, на что он был способен и в чем его секрет, без рассказов про GeForce 256 и ATi 3D Rage, их и так все знают.

Стенка во «ВКонтакте», Баш.орг в закладках, LiveJournal и пиликающая «Аська» — и никаких алгоритмов, которые знают нас лучше нас самих. Возвращаемся к тому, чем пользовались все и что исчезло почти незаметно.

Осторожно: хардкор, или как написать фильтр Блума на C. Алгоритму больше полусотни лет, а поводов вспомнить, как пишут по-настоящему оптимизированный код, меньше не становится.

Июль позади, и лето потихоньку идет к финалу — остался август. Вернемся с новым дайджестом уже через месяц, а пока ждем ваши комментарии и лайки.

Привет, Хабр! Меня зовут Михаил Шпаков, я руковожу разработкой в Timeweb Cloud и развиваю Statuser — сервис мониторинга доступности сайтов, который когда-то начинался как вечерний пет-проект. Я уже рассказывал, как он появился, как в нём выросли статус-пейджи и зачем я научил его следить за DNS.

Той самой первой статье недавно исполнился год. Мне захотелось отметить эту дату не праздничным постом, а в духе самого Statuser: цифрами. Повод удачно совпал с устройством сервиса. Историю инцидентов он хранит ровно год, так что в базе меня ждал аккуратный годовой датасет: 108 312 инцидентов с июля 2025-го по июль 2026-го. По сути, готовая статистика о том, как живёт и падает обычный сайт.

Я залез в эти данные и хочу поделиться тем, что нашёл. Почему сайты падают на самом деле, в какое время это происходит, сколько длится типичное падение и что за странная аномалия случилась этим июнем.

Сразу честная оговорка: это не «исследование всего интернета». Это 6 500 сайтов пользователей Statuser, в основном малый и средний бизнес, интернет-магазины, SaaS, корпоративные сайты. Но на ста тысячах инцидентов закономерности видны отчётливо.

Коротко в цифрах:

• 108 312 инцидентов за год, примерно 297 в день;

• 5,7 минуты — медианная длительность падения;

• 99,92% — медианный аптайм сайта;

• 49,8% всех падений — таймаут.

Автор текста: mikhailshpakov. Написано специально для ▶️Timeweb Cloud и читателей Pikabu.

❯ Почему сайты падают на самом деле

Когда думаешь о падении сайта, в голову приходят драматичные сценарии: взлом, DDoS, сгоревший дата-центр. Реальность скучнее, но по-своему интереснее.

Половина всех инцидентов за год (53 920) — это таймаут. Сервер жив, порт открыт, но ответа в разумное время нет. Сайт не «упал», он «задумался»: перегруженная база, забитый пул воркеров, медленный внешний API. Для посетителя разницы никакой.

Дальше идут «сервер недоступен» (11,2%), честные 500-ки (7,4%) и bad gateway (6,9%). Последний случай особенно узнаваемый: бэкенд уже умер, а nginx остался и рапортует об этом всем желающим.

Отдельно отмечу две категории. SSL-проблемы дают около 4% инцидентов, и это самая обидная категория: почти все они предотвращаются автопродлением и проверкой цепочки. DNS даёт ещё почти 2% — та самая история, из-за которой я когда-то добавил DNS-мониторинг.

А ещё 1 867 раз за год сайты отвечали мониторингу 404-й прямо со своей главной страницы. Кто-то удалил или переместил её и просто не заметил.

❯ Когда падают: полуденный пик и полуночные деплои

Я ожидал, что график инцидентов по часам будет просто повторять график нагрузки: днём больше трафика, больше и падений. Почти так и есть, но с одним сюрпризом.

Главный пик приходится на время с полудня до пяти вечера, худший час — 12:00 (5 160 инцидентов за год), самый спокойный — пять утра. Но посмотрите на полночь: это пятый по аварийности час суток. В 00:00 стартуют кроны, ночные деплои и всякие «давай выкатим, всё равно никто не смотрит».

Есть на графике и второй ночной бугорок, поменьше, в три часа по Москве. Я не сразу сообразил, откуда он: три ночи по Москве — это полночь по UTC. Серверы, живущие по всемирному времени, запускают свои кроны на три часа позже московских и точно так же от них падают.

По дням недели картина ещё красноречивее: в четверг сайты падают на треть чаще, чем в воскресенье. Сайты ломают люди, а не энтропия. В выходные никто не деплоит, и ничего не падает.

❯ Сколько длится типичное падение

47% всех падений закрываются за пять минут, ещё треть укладывается в полчаса. Типичный инцидент — это рестарт, докатившийся деплой или короткий всплеск нагрузки.

Тут важно оговориться. У большинства мониторов интервал проверки пять минут (это дефолт), поэтому и мир мониторинг видит с шагом в пять минут: «инцидент длился пять минут» на деле означает «к следующей проверке всё уже работало». Реальный простой мог быть и минуту, и тридцать секунд. Так что цифры в графике скорее оценка сверху, коротких падений на самом деле ещё больше.

Теперь хвост распределения. 3 203 инцидента длились больше суток. Это сайты, за которыми никто не следит: они падают тихо и лежат, пока кто-нибудь случайно не заметит. Собственно, ради борьбы с этим сценарием я и делаю мониторинг.

И ещё одно наблюдение, которое мне очень нравится. Медианная длительность инцидента днём и ночью почти одинаковая, около пяти с половиной минут: короткие падения чинит автоматика, а ей всё равно, который час. Зато p90 отличается заметно: 119 минут днём против 161 ночью. Длинные инциденты ночью чинят на 35% дольше. Если автоматика не справилась, дальше всё зависит от человека, а человек спит.

❯ Что случилось в июне

В июне Statuser работал как никогда много: 22 556 инцидентов за месяц, вдвое больше обычного. Уведомления улетали пользователям почти каждую минуту. И это не эффект роста базы мониторов: в пересчёте на один сайт вышло 3,54 инцидента при годовой норме 1,5–2.

Если развернуть июнь по дням, видно, что это был не один большой сбой, а три отчётливые волны: 9–11, 17–18 и 23–25 июня. Худший день года — 24 июня: 1 169 инцидентов на 326 разных сайтах за сутки.

Самое интересное в этих волнах — профиль. Обычно на сетевые причины (таймауты и недоступность хоста) приходится 60–63% инцидентов, а в июньские волны доля доходила до 78%. То есть сами приложения продолжали работать, но переставали быть доступными по сети. О причинах рассуждать не возьмусь: думаю, многие и сами помнят, каким выдался июнь. Покажу только то, что видно в данных.

К июлю всё стабилизировалось, но только наполовину. По числу инцидентов в день волны прошли: после 26 июня ни один день не поднимался выше 750 против 1 169 в пике. А вот структура ошибок к норме не вернулась: доля сетевых причин и в последнюю неделю июня (71%), и в июле (70%) держится заметно выше майских 60–63%. Да и в абсолютных числах июль пока в полтора раза аварийнее мая.

❯ Кто держит девятки

«У нас аптайм 99,9%» — любимая фраза маркетинговых материалов. Я решил проверить, как обстоят дела на практике, и посчитал средний аптайм за последние 90 дней по всем активным мониторам.

Медианный сайт держит 99,92%, то есть около 35 минут простоя в месяц. Неплохо! Но до «четырёх девяток» дотягивает только каждый четвёртый сайт, а 15% живут с аптаймом ниже 95% — это больше полутора суток простоя ежемесячно. И, судя по хвосту из прошлого раздела, владельцы чаще всего об этом просто не знают.

❯ SSL: монокультура одного центра сертификации

Из побочных находок. Statuser проверяет SSL-сертификаты, и по 4 643 отслеживаемым сертификатам расклад такой:

71,5% — Let’s Encrypt. Платные центры сертификации в этом сегменте практически исчезли, HTTPS стал бесплатной нормой, и это прекрасно. Смущает только, что почти три четверти сайтов теперь зависят от одного бесплатного CA. Интересно, что будет, если у него случится по-настоящему плохой день.

Кстати, страшилка про «протухший сертификат» почти умерла: реально просроченных сертификатов на живых сайтах единицы, автопродление победило. Но не до конца: 1 694 инцидента за год случились из-за проблем с цепочкой, когда сам сертификат в порядке, а промежуточный в цепочке нет.

❯ Бонус: как выглядит задержка из разных точек мира

Statuser проверяет сайты из пяти локаций, и по средней задержке ответа получилась любопытная география:

Из Питера и Москвы получается около полусекунды, из Амстердама 621 мс, а из Нью-Йорка 1 074 мс. Дело тут, конечно, не в Нью-Йорке: большинство сайтов из выборки размещены в России, и задержка просто растёт с расстоянием до сервера. Но в этом и практический вывод: если сайт хостится в России, а аудитория есть за её пределами, для этой аудитории он вдвое медленнее. И увидеть это можно, только проверяя сайт не из Москвы.

❯ Что из этого стоит унести с собой

• Мониторьте деградацию, а не только доступность. Половина падений начинается с таймаута, то есть с медленных ответов, которые часто видно заранее по росту латентности.

• Полночь — худшее время для крона и деплоя без присмотра. Если ночной инцидент не починит автоматика, лежать он будет до утра.

• Проверяйте цепочку сертификатов, а не только срок действия. Проблемы с цепочкой случаются чаще, чем просроченные сертификаты.

• 99,99% — не данность. Три четверти сайтов её не держат. Чтобы понять, в какой группе ваш, нужно сначала начать измерять.

❯ В заключении

Если сжать год наблюдений в одну мысль, получится так: сайты падают не от катастроф, а от рутины. Таймауты, ночные кроны, забытые сертификаты, деплой в четверг после обеда. Хорошая новость в том, что с рутиной, в отличие от катастроф, можно работать: измерять, замечать закономерности и чинить причины, а не последствия.

Спасибо, что дочитали до конца! Буду рад обратной связи: вопросам, идеям или просто впечатлениям в комментариях. А если хотите узнать, сколько девяток держит ваш сайт — попробуйте Statuser.

Больше интересных статей и новостей в нашем блоге на Хабре и телеграм-канале.

📚 Вам может быть интересно:

• Подключаю свой перчик к умному дому, или как я датчик влажности почвы для Home Assistant делал

• Когда реклама — искусство на стыке форм. Три истории о том, как консоли продавали через угрозы, сюрреализм и метафоры

• Формулы и функции в Excel: подробное руководство для начинающих