Сопоставьте идентификатор артефакта в отчёте CI с версией процесса, который ответил на тестовый запрос. Адрес стенда мог остаться прежним после выкладки. Если запрос попал в старую сборку, успешный тест ничего не говорит о готовности кандидата.
Пропустите через проверку две разные сборки
В условном примере артефакт A обслуживает общий адрес, а B только что развернули рядом. Проверка запрашивает страницу входа и получает HTTP 200 от A. Чтобы обнаружить это на стенде, оставьте обе версии запущенными, направьте пробный запрос на общий адрес и сравните версию ответа с ожидаемой B. При расхождении проверка должна остановиться до выполнения сценариев. Затем повторите её через маршрут кандидата.
Пусть отчёт хранит идентификатор сборки, окружение и фактическую версию ответа. Для контейнера подойдёт неизменяемый digest образа, если сборка и развёртывание отслеживают его. Если приложение сообщает собственную версию, убедитесь, что она вшита при сборке. Значение из общей переменной окружения может совпасть у двух разных артефактов.
| Наблюдение | Решение |
|---|---|
| Ответила предыдущая сборка | Проверить адрес, правила маршрутизации и версию экземпляра |
| Ответила нужная сборка, но сценарий упал | Сохранить результат и отложить переключение трафика |
| Версия меняется от запроса к запросу | Проверить, что весь тестовый маршрут закреплён за одним кандидатом |
| Версия совпала, сценарии прошли | Привязать результаты к этому кандидату для последующей выкладки |
Если тест запускает несколько сценариев параллельно, сохраняйте фактическую версию для каждого запроса на входе в сценарий. Так смешанный результат не превратится в отметку о том, что вся проверка прошла на нужной сборке.
Готовность развёртывания и проверка сценария
Успешное развёртывание показывает состояние инфраструктуры. Для проверки приложения выберите короткий маршрут, который затрагивает изменившуюся часть системы. Например, после изменения поиска запросите товар из заранее известного тестового набора и сравните его идентификатор. Успешная загрузка главной страницы при этом может оказаться совершенно бесполезной.
В Kubernetes команда kubectl rollout status по умолчанию отслеживает последний rollout. Если во время ожидания начинается новый, команда переключается на него. Параметр --revision позволяет отслеживать конкретную ревизию. Результат этой команды дополняет проверку приложения через маршрут кандидата.
Повторный запуск после сбоя
Если проверка оборвалась из-за временного сбоя стенда, повторите её с тем же идентификатором кандидата. Когда на стенде уже запущена другая сборка, прежний отчёт нельзя использовать для неё. Откат также фиксируйте как отдельное развёртывание. Даже знакомый артефакт может работать с другой конфигурацией или схемой данных.
Для расследования хватит идентификатора кандидата, адреса тестового маршрута, фактической версии первого ответа и одного упавшего сценария. Сравните их с записью о переключении трафика. Это покажет, была ли проверка проведена для той сборки, которую получили пользователи.