«Наличие независимого серверного контура вновь становится для бизнеса жизненной необходимостью»
ИT-компания «Иностудио» является официальным партнером «Яндекс Облака» и активно применяет сервисы экосистемы как внутри компании, так и при проектировании архитектур для своих клиентов. Ситуация затронула ее напрямую. На вопросы N ответил гендиректор компании Максим Болотов.
N: — Каков был масштаб проблем, с которыми столкнулись вы и ваши клиенты?
М.Б.: — Глубина последствий для различных контуров оказалась принципиально разной. Если говорить о наших собственных процессах, то благодаря исторически сложившейся инженерной культуре ключевые производственные мощности, контуры разработки и закрытые базы данных мы всегда держали на отдельной отказоустойчивой on-premise-инфраструктуре (инфраструктура внутри компании. — N). Это решение уберегло основной бизнес от остановки. Однако в облаке у нас некоторые инструменты рабочего процесса и часть резервных копий. Утром 8 октября они стали недоступны. Дополнительно мы ощутили деградацию смежных SaaS-инструментов: в частности, начались перебои в видеоконференциях «Телемоста», упала точность автоматической транскрибации встреч, а в «Яндекс Диске» возникли трудности с оперативным доступом к части рабочих материалов.
Что касается решений наших клиентов, то под прямой удар попали несколько проектов, чья инфраструктура была размещена непосредственно на площадках «Яндекса». Среди них как масштабные коммерческие сервисы с микросервисной архитектурой, так и социально значимые ресурсы, например веб-портал образовательного учреждения, который по требованиям регулятора обязан размещаться исключительно в сертифицированном отечественном облачном контуре. В зависимости от того, в каких зонах доступности находились виртуальные машины, сервисы либо были временно недоступны, либо деградировали по скорости отклика. Полного блэкаута в клиентском сегменте не произошло.
N: — Как решаете возникшие проблемы?
М.Б.: — Мы разделили аварийное реагирование на три параллельных трека: спасение данных, экстренный подъем сервисов и прямой диалог с заказчиками.
Практически с первых минут после сбоя наши специалисты, включая даже тех, кто был в отпуске, начали превентивную выгрузку резервных копий клиентских серверов из тех зон, которые на тот момент еще оставались стабильными. Это решение себя оправдало. Когда в последующие дни под ударом оказались соседние площадки, критические данные уже были безопасно стянуты в наш физический контур.
Главная техническая сложность, с которой столкнулись мы и многие коллеги по рынку, заключалась в том, что снапшоты виртуальных машин (инструменты, позволяющие сохранять данные параллельно с резервным копированием. — N) хранились внутри того же облака. Из-за резкого дефицита мощностей провайдер ввел жесткие лимиты на выделение дисковых квот, что сделало невозможным автоматическое восстановление бэкапов «по одной кнопке». Пришлось задействовать нестандартные инженерные подходы: разворачивать проекты на собственных серверах, восстанавливать фронтенд и контент буквально из версионного контроля Git (система, которая сохраняет историю правок. — N), локальных временных файлов и даже кэшей поисковых систем.
Крупных коммерческих клиентов мы в сжатые сроки подняли на имеющихся мощностях. Сложнее ситуация с теми заказчиками, чьи проекты юридически привязаны к обязательной внешней сертификации. Тут мы в постоянном контакте с техподдержкой облака, ожидая согласования квот для штатной выгрузки данных. Все заказчики были своевременно оповещены о ситуации, юридических претензий или разрыва SLA нет. Есть четкое понимание форс-мажорного характера инцидента.
Команда «Яндекса» сегодня совершает титаническую работу по удержанию связности национальной цифровой инфраструктуры под ударами беспрецедентного масштаба. Если честно, то я испытываю сейчас чувство гордости как за действия нашей команды, так и подвиг специалистов «Яндекса». Все они мои герои!
N: — Есть ли альтернатива?
М.Б.: — Если кратко — да. В первые сутки после аварий многие предприятия ринулись в другие крупные публичные облака Selectel, VK Cloud и другие. В результате рынок моментально столкнулся с каскадным эффектом дефицита: свободные вычислительные мощности и серверные стойки на территории РФ были моментально законтрактованы либо исчерпаны. Зарубежные хостинги для зрелого бизнеса и госсектора давно закрыты из-за требований Федерального закона № 152-ФЗ и соображений информационной безопасности.
Полагаю, что этот кризис возвращает региональный бизнес к балансу между чистым облаком и собственной инженерной инфраструктурой. В течение последних лет преобладал тренд на отказ от собственных серверных. Многие считали, что подписка на облако проще и дешевле в горизонте одного года. Однако на дистанции трех-четырех лет с учетом рисков физической устойчивости наличие независимого серверного контура вновь становится для бизнеса жизненной необходимостью. Да и регулятору, возможно, стоит еще раз пересмотреть свои требования.