Учебник. Настройка оповещений для группы доступности
В этом учебнике вы настроите оповещения группы доступности ag-ventas компании ООО «Лукоморье» так, чтобы они отражали целевую точку восстановления (RPO) бизнеса, поступали в нужный канал Slack и не срабатывали во время плановых работ. В конце вы проверите настройку плановой отработкой отказа.
Вы узнаете, как:
- преобразовать RPO в пороговые значения, которые задаются один раз для всей среды;
- направлять оповещения в Slack с минимальной серьезностью;
- использовать окно обслуживания, чтобы плановая отработка отказа никого не поднимала по тревоге.
Перед началом работы
- Группа отслеживается. Если нет, выполните инструкции из раздела Краткое руководство. Добавление группы доступности.
- У вас есть роль Entity admin (администратор сущности) в ООО «Лукоморье», и на сервере Excubius настроен Slack.
- Администратор баз данных может выполнить плановую ручную отработку отказа
ag-ventasво время проверки.
1. Преобразуйте RPO в пороговые значения
ООО «Лукоморье» допускает потерю не более 5 минут данных. Проверка sqlserver_ag.secondary_lag оценивает для каждой базы данных и вторичной реплики, данные за сколько секунд будут потеряны при отработке отказа. Ее базовый уровень в каталоге — предупреждение выше 60 секунд и критическое состояние выше 300 секунд, что уже соответствует RPO в 5 минут.
Очередь повтора показывает, сколько времени займет восстановление после отработки отказа. Для загруженной базы данных продаж ООО «Лукоморье» настройте предупреждение раньше, чем предусматривает базовый уровень:
- Откройте Settings › Entities и выберите ООО «Лукоморье» › Production.
- Откройте Threshold defaults и нажмите Set a default for a check.
- Выберите Database synchronization, queues and data loss (
sqlserver_ag.database_sync). - Нажмите Set here и введите для предупреждения
> 25600КБ в течение5m, а для критического состояния —> 256000КБ в течение5m. - Нажмите Save.
Теперь все группы доступности в Production, существующие и будущие, используют эти значения. На странице проверки каждой группы рядом с ними отображается from Production.
Задавайте значение на уровне среды, а не группы. Когда ООО «Лукоморье» в следующем году добавит вторую группу, она унаследует нужные пороговые значения без дополнительных действий.
2. Отправьте оповещения в Slack
- Откройте Settings › Notifications и выберите ООО «Лукоморье» в средстве выбора сущности.
- Нажмите Add Slack channel. Введите имя Лукоморье — оповещения, канал Slack
#ciguapa-alerts, в поле Minimum выберите Warning, а в поле Message language — Español, если команда читает по-испански. - Нажмите Test. В канале появится тестовое сообщение. Если Slack его отклоняет, пригласите бота в канал и повторите проверку.
Теперь оповещения от всего, что находится в ООО «Лукоморье», поступают в этот канал.
3. Откройте окно обслуживания для проверки
Отработка отказа всегда создает критическое оповещение, потому что каждая смена роли требует объяснения. Перед плановой проверкой сначала откройте окно, чтобы никого не поднимать по тревоге:
- Откройте Settings › Maintenance windows и выберите ООО «Лукоморье» › Production.
- Нажмите Start maintenance now, укажите 30 минут и причину Плановая проверка отработки отказа ag-ventas.
- Выберите Some resources и укажите
ag-ventas. Его реплики и базы данных охватываются вместе с ним.
4. Выполните отработку отказа и наблюдайте
- Попросите администратора баз данных выполнить плановую ручную отработку отказа
ag-ventasнаsql-ventas-02. - На панели мониторинга Overview группа находится в состоянии Обслуживание, а первичная реплика меняется примерно в течение 30 секунд.
- В Alert inbox задайте фильтр Status: All. Открыто оповещение Role change / failover detected с пометкой opened during maintenance. Сообщение в Slack не отправлено.
- Выберите оповещение, прочитайте временную шкалу и нажмите Resolve с примечанием Плановая проверка.
5. Закройте окно
Нажмите End now в окне. Если бы какое-либо оповещение еще было открыто, о нем сейчас было бы объявлено в #ciguapa-alerts, как будто оно только что открылось. Поскольку вы его разрешили, ничего не отправляется.
Очистка
- Таким же образом верните первичную роль на
sql-ventas-01в новом окне. - Пороговые значения и канал сохраните: теперь это конфигурация группы.