grafana cloud 에서 디스코드(discord) Alert 설정하기

이번에는 grafana cloud 에서 alert를 설정하는 것을 알아보겠습니다.

prometheus 에서 alert rule을 설정하는데 두 가지 방법이 있는데 하나는 alertmanager 이고, 하나는 grafana에서 설정하는 방법입니다.

grafana 4.0 이전 버전에서는 alert rule을 사용할 수 없어, prometheus/alertmanager https://github.com/prometheus/alertmanager 을 추가적으로 설정해줘야합니다. 다행히도 현재 grafana 또는 grafana cloud 에서는 사용할 수 있습니다.

Alert Rule에 새로운 rule을 추가해봅시다.

node-exporter 에서 지원하며 추적할 metric을 추가하고(A), 그리고 B, C에 상세 룰을 추가합니다.

상세 메시지를 추가합니다. 

다음으로는 어디에서 메시지를 보일 지 설정하는 단계입니다.

 

컨택트 포인트에 가서 컨택트 포인트의 이름을 작성하고 디스코드, 그리고 웹훅 URL을 기입합니다.

그다음 알림 정책입니다. 알림정책은 맨 처음 세팅한 룰 규칙에서 어떤 label 일때 어떤 컨택트 포인트로 알림을 갈지 세팅하는 것입니다.

이 부분은 'channel = discord' 로 세팅하고 알림 규칙에서도 label을 channel discord 로 설정해줬습니다.

짜잔 디스코드 결과물입니다.

resolved 될때도 알림이 옵니다.