От запуска ВМ до готового приложения в облаке: три проверки перед стартом
От запуска ВМ до готового приложения в облаке: три проверки перед стартом. Фото: из архива K2 Cloud
Первая проверка: приложение выполняет рабочую операцию с данными
Сначала проверяют операцию, ради которой пользователи откроют приложение. Возьмем условный пример: веб-приложение принимает заявки, а база данных хранится на отдельном диске. Это учебная схема без результатов реального проекта. Для нее проверка выглядит так: пользователь заполняет форму, отправляет заявку и затем видит сохраненные данные при повторном открытии страницы.
Стартовая страница может загружаться даже при недоступной базе, а сообщение об успешной отправке еще не доказывает, что запись сохранилась. Поэтому результат сверяют с базой и повторным чтением заявки. Если запись пропала после перезапуска приложения, нужно проверить, куда оно сохраняет данные и подключено ли постоянное хранилище.
В мастере К2 Облака последовательно выбирают образ, размещение, тип экземпляра, сеть и диски, затем переходят к дополнительным настройкам и обзору. Образ операционной системы сверяют с версиями приложения и его библиотек: несовместимость может помешать запуску еще до первой заявки. Процессор и память выбирают с учетом работы приложения и базы, а если на том же сервере формируются отчеты, эту нагрузку проверяют вместе с приемом заявок.
Доступ проверяют из браузера в пользовательской сети: подключение администратора к серверу может использовать другие адреса, маршруты и порты. Отдельно проверяют связь приложения с базой. В правилах групп безопасности задают нужные соединения и проверяют их на практике, поскольку ошибка на этом участке прерывает сохранение заявки при работающей ВМ.
Для дисков проверяют место хранения базы, подключение нужного диска и запас свободного пространства: его расходуют заявки, журналы приложения, временные файлы и данные самой базы. Когда место заканчивается, запись может остановиться, хотя сервер продолжает отвечать на подключения. До запуска определяют порядок очистки временных файлов и журналов, чтобы они не вытеснили рабочие данные.
Операцию повторяют при ожидаемом числе одновременных обращений и с объемом данных, близким к рабочему: одна заявка в пустой базе не покажет, что произойдет при параллельной записи и построении отчета. В протокол заносят конфигурацию, условия теста, время ответа и ошибки, чтобы после изменения ресурсов сравнить результаты в тех же условиях.
Метрики помогают найти причину задержки, если связать их с запросом

Вторая проверка показывает, заметит ли команда проблему и сможет ли начать разбор. В условном приложении полезный сигнал — сохранение заявки занимает больше времени или заканчивается ошибкой. Для этого отдельно измеряют время операции и число ошибок в приложении. Метрики сервера помогают объяснить изменение, но по одному графику процессора нельзя определить, удалось ли пользователю отправить форму.
В К2 Облаке загрузку процессора показывает CPUUtilization. При чтении графика проверяют выбранный период, статистику и интервал: от них зависит, какие измерения попали в точки и как они объединены. На скриншоте стоят «Сумма» и 30 минут. Показанные значения нельзя читать как среднюю загрузку за полчаса, а выбранный интервал не стоит переносить в настройки другого приложения без проверки его нагрузки. Документация по метрикам.
Крупный интервал может скрыть короткий сбой, при котором заявки не сохранялись: на графике за длительный промежуток он затеряется среди остальных измерений. Для разбора выбирают период вокруг события и подходящую статистику, а при сравнении двух тестов используют одинаковые статистику и интервал. Иначе разница на графиках может возникнуть из-за способа отображения данных.
У контрольного теста фиксируют начало и конец, затем сопоставляют их с метриками и журналами ошибок. Если вместе с замедлением заявок растет загрузка процессора, проверяют, какие процессы его занимают: приложение, база или отчет по расписанию. Это еще не повод сразу увеличивать сервер. Результат разбора должен показать, поможет ли добавление ресурсов или задержку вызывает конкретная операция, которую нужно изменить.
При свободном процессоре поиск продолжается в других местах. Приложение может ждать соединение с базой, освобождение заблокированной записи или завершение операции с диском. Тогда проверяют журнал базы, память внутри операционной системы и работу хранилища. Низкая загрузка процессора сама по себе не подтверждает исправность приложения, пока пользователи не могут сохранить заявку.
Для контроля порогов метрик в К2 Облаке используют раздел «Алармы». Порог и длительность превышения выбирают после наблюдения за обычной работой: короткий всплеск при построении отчета может укладываться в допустимое время ответа. Для каждого оповещения определяют получателя и первое действие, например проверку отправки заявки и журнала ошибок за тот же период. Без этого команда получит сигнал, но потеряет время на выяснение, что проверять.
Пробное восстановление показывает, какие данные вернутся после сбоя

Третья проверка заканчивается, когда восстановленное приложение снова принимает и показывает заявки. До выбора расписания команда определяет, сколько недавних записей допустимо потерять и как долго пользователи могут ждать возврата сервиса. В условном примере это два разных вопроса: какие заявки придется восстановить другим способом и сколько времени форма будет недоступна.
Частота копирования связана с первым вопросом. Если пригодная для восстановления копия была создана вчера, последующие заявки могут в нее не попасть. Поэтому ежедневное расписание подходит не каждому приложению, а после настройки проверяют фактическое время последней успешной копии. Пропущенное или неудачное задание увеличивает разрыв, даже если в плане указана нужная частота.
В К2 Облаке план содержит правила копирования, а экземпляры и диски включают в выборку ресурсов. В примере нужно проверить, попал ли туда диск с базой: копия системного диска не заменяет копию данных на другом диске. После первого задания сверяют состав сохраненных ресурсов. Для работающей базы также проверяют требования ее системы управления к согласованности копии, чтобы данные можно было открыть после восстановления.
Расписание читают вместе с часовым поясом и окном начала копирования. Стандартное окно в К2 Облаке составляет час: задание должно начаться в течение этого часа после указанного времени, а завершиться может позже. Если пользователи начинают работу утром, готовность нужной копии проверяют по результату задания, а не выводят из времени, записанного в плане. Документация по резервному копированию.
Срок хранения выбирают с учетом того, когда команда может обнаружить ошибку в данных. Свежая копия способна уже содержать ошибочно измененные заявки, поэтому иногда требуется вернуться к более раннему состоянию. Бессрочное хранение не заменяет этот выбор и ведет к накоплению копий. Для срока хранения нужно понятное основание: какие ошибки могут обнаружиться с задержкой и за какой период сохраняют возможность возврата.
Пробное восстановление экземпляра или диска проводят в отдельной среде. Ей закрывают доступ к рабочей базе и другим рабочим системам, чтобы тестовая копия не изменила настоящие данные. Затем проверяют запуск базы, наличие ожидаемых заявок и отправку новой тестовой заявки. Проверка выявляет проблемы, которые не видны по статусу задания копирования: например, отсутствие нужных настроек приложения или невозможность прочитать восстановленные данные.
Время измеряют от начала восстановления до успешной операции в приложении. Подключение диска, запуск базы, настройка доступа и проверка заявки тоже занимают время, поэтому длительность одного задания не описывает весь простой. Полученный результат сравнивают с допустимым ожиданием пользователей. Если времени требуется больше, команда уточняет порядок действий или способ восстановления до рабочего сбоя.
Готовность приложения подтверждают результаты трех проверок: заявка сохраняется при ожидаемой нагрузке, сбой можно заметить и начать разбирать, а данные удается вернуть вместе с работающим сервисом. Эти результаты стоит сохранить с конфигурацией и порядком действий команды. После изменения приложения, роста базы или новых требований к простою проверки повторяют: прежний тест уже может не описывать рабочие условия.
Упомянутый сервис
Комментариев пока не было