728x90
반응형
SMALL
1. 알람을 수신할 팀즈 채널에서 Incoming Webhook 을 만든다.
2. Grafana 알람 설정에서 webhook URL 을 추가한다
-Alerting > Notification Channels > New Channel
- Type : Microsoft Teams, URL 에는 위 팀즈 채널에서 생성한 Incoming Webhook URL 을 등록해준다.
3. 테스트 해 봄
*메일은 프로메테우스 서버에 직접 접속해서 SMTP 설정 관련 config 수정이 필요한데, 팀즈는 웹훅 URL 만 등록해주면 됨
*alarm fatigue
바쁜 작업자가 안전 경보에 둔감해져 결과적으로 그러한 경보를 무시하거나 적절하게 대응하지 못하는 현상
시스템 알람을 너무 많이 받으면.. 실제 장애 상황에 적절하게 대응하지 못 할 수 있음
728x90
반응형
LIST
'DevOps > Infra' 카테고리의 다른 글
(Prometheus) Agent 노드 구성하기 #1. windows_exporter 설치 (0) | 2022.01.25 |
---|---|
(Grafana) y 축 max 값 설정하기, y axis soft max (0) | 2022.01.24 |
(Prometheus) 모니터링 되는 노드 확인하기 (0) | 2022.01.20 |
(Zabbix) zabbix server timezone 변경 (0) | 2021.12.28 |
(Ansible) Ubuntu 20.04.3 LTS 에 Ansible control node 설치하기 (0) | 2021.09.14 |