모니터링과 장애 대응¶
dashboard는 graph를 모으는 곳이 아니라 이상 신호를 대응 절차와 연결하는 도구입니다.
핵심¶
- latency, error, throughput, resource와 schema mismatch를 구분합니다.
- label이 늦으면 input quality와 prediction distribution을 먼저 봅니다.
- alert마다 owner, 확인 순서, rollback 조건을 적습니다.
연습¶
- schema mismatch 증가 상황의 runbook을 한 페이지로 작성합니다.