194. [Kubernetes] Prometheus와 AlertManager를 통해 서비스 latency의 Slack 알림 전송하기

요즘 코로나때문에 방 안에만 있다보니 계속 텐션이 낮아지는 느낌이다. 글도 안 쓴지 한달이나 되었다.

이번 사내 AlertManager를 구축하면서 여러가지 테스트를 진행했지만, 구글에 AlertManager로 검색을 해보면 친절하게 설명되어 있는 문서가 단 하나도 없어서 여러모로 고생을 많이 했다. 다른 사람들은 나와 같은 삽질을 하지 않기를 바라며, 프로메테우스 및 AlertManager 구축부터 Slack 알림까지 구축하는 글을 써보려 한다. 1.

Prometheus와 AlertManager 쿠버네티스에서 모니터링 시스템을 구축한다면 대부분의 경우 프로메테우스를 사용하게 된다. 하지만 프로메테우스만 사용하는 경우는 거의 없고, 보통은 Grafana, AlertManager, Thanos 등과 같은 솔루션을 연동해 함께 사용하는 것이 일반적이다.

그 중에서도 AlertManager는 프로메테우스의 메트릭 변화에 대한 알림을 전송하는 역할을 담당하는데, 프로메테우스 메트릭을 통해 ...