[SpaceONE] 복잡한 클라우드 장애 관리, 하나로 통합하고 해결 속도 높이기

BLOG

작성일: 2022-08-08

복잡한 클라우드 장애 관리, 하나로 통합하고 해결 속도 높이기

장애 알람도 선별이 필요해!

클라우드 서비스 운영 시 장애 알람은 꼭 필요한 기능이지만 너무 많은 알람은 오히려 운영자의 업무를 방해합니다. 뿐만 아니라 Grafana, Prometheus, Amazon SNS 등 여러 개의 모니터링 툴을 매번 체크하는 것도 업무 효율성을 현저히 떨어뜨립니다.

SpaceONE은 모니터링 툴을 하나로 통합하여 체계적으로 장애 알람을 관리하고, 관리 이력을 분석하여 사용자 경험을 개선합니다.

얼럿 매니저란?

얼럿 매니저(Alert Manager)는 SpaceONE의 장애 관리 서비스입니다. 얼럿 매니저 서비스를 통해 모니터링 시스템에서 발생하는 다양한 패턴의 이벤트 혹은 인시던트를 통합 관리할 수 있습니다.

얼럿 매니저만의 특별한 기능은 다음과 같습니다.

웹훅(Webhook)을 통해 수신한 이벤트를 SpaceONE이 체계적으로 정리해 ‘얼럿(Alert)’을 생성합니다.
SpaceONE에 접속하지 않아도 알림(Notifications) 서비스를 통해 얼럿의 생성 유무와 상태 변경을 확인할 수 있습니다.
얼럿 상태를 변경하거나 담당자를 체계적으로 관리할 수 있습니다.
프로젝트 구성원들에게 효과적으로 얼럿을 전달할 수 있습니다.

얼럿 매니저만의 장점은?

✅얼럿 매니저 대시보드

1) 모든 얼럿 현황을 한 눈에 확인할 수 있습니다.

2) 일별 얼럿 통계를 확인하고, 언제 얼럿이 많이 발생했는지 확인할 수 있습니다.

3) 프로젝트별 얼럿 처리 현황도 한 번에 확인할 수 있습니다.

🙋‍SpaceONE 얼럿 매니저 기능이 연동할 수 있는 외부 서비스에는 어떤 것들이 있나요?

외부 모니터링 솔루션: Grafana, Zabbix, Prometheus, Amazon SNS
알람 발송 채널: Slack, Telegram, Jira, SMS, 전화, 이메일

✅원하는 채널로 얼럿 발생을 알려주는 자동 알림 발송 서비스

신속한 대응이 필요한 얼럿이 발생했을 때, 바로 원하는 채널에서 알림을 받을 수 있습니다. 프로젝트의 알림(Notifications) 탭에서 알림 수신 채널을 등록해 보세요. 뿐만 아니라 개인 프로필에서 개인 알림 채널도 등록할 수 있는 장점이 있습니다.

✅장애 처리 워크플로 관리

알림을 받은 장애별로 담당자를 설정하고, 단계별 상향식 보고 정책(Escalation Policy)를 통해 장애 알림을 위급성과 처리 상태를 기준으로 분류할 수 있습니다. 각 장애에 대한 처리 이력을 조회하며 장애 처리 워크플로 전반을 관리할 수 있습니다.

🙋‍단계별 상향식 보고 정책(Escalation Policy)은 무엇인가요?

단계별 상향식 보고 정책은 장애 발생 시 지정된 담당자들에게 순차적으로 알람을 전파하기 위한 정책입니다. 얼럿 매니저에서 알람 단계별로 사용자 또는 메신저 채널을 지정하여 지정된 순서에 맞춰 순차적으로 알람을 발송하는 규칙을 의미합니다.

예를 들어 1단계에서는 해당 단계의 담당자에게 Slack과 같은 미리 지정된 연락 채널로 알람을 발송합니다. 1단계 담당자가 일정 시간 동안(30분) 알람을 확인하지 못했다면 다시 2단계 담당자에게 SMS와 같이 2단계에 지정한 알람 채널로 장애 알림을 발송합니다. 만약 2단계에서도 알람을 확인하지 못했다면 3단계에는 3단계 지정 담당자에게 전화 등 3단계 지정 채널로 알람을 전달합니다. 담당자 지정을 통해 장애 발생 시 확실하게 대응하고, 알람을 놓치는 상황은 원천 차단할 수 있겠죠?

✅세부 알림 정책 수립 관리