이 웹 사이트는 귀하가 웹 사이트를 탐색하는 동안 귀하의 경험을 향상시키기 위해 쿠키를 사용합니다. 이 쿠키들 중에서 필요에 따라 분류 된 쿠키는 웹 사이트의 기본적인 기능을 수행하는 데 필수적이므로 브라우저에 저장됩니다. 또한이 웹 사이트의 사용 방식을 분석하고 이해하는 데 도움이되는 제 3 자 쿠키를 사용합니다. 이 쿠키는 귀하의 동의하에 만 브라우저에 저장됩니다. 이러한 쿠키를 거부 할 수도 있습니다. 이러한 쿠키 중 일부를 선택 해제하면 검색 환경에 영향을 미칠 수 있습니다. 이러한 쿠키는 이러한 쿠키를 사용하여 웹 사이트의 사용 방식을 분석하고 이해하는 데 도움이되는 제 3 자 쿠키를 사용합니다. 이러한 쿠키는 이러한 쿠키를 사용하여 웹 사이트의 사용 방식을 분석합니다.

효과적인 경고 관리 Routine의 핵심 성분

경고 삼기 및 Categorization

첫 번째 단계는 심각성, 소스 및 잠재적 인 영향을 통해 들어오는 경고를 분류하는 것입니다. 실용적인 스키마는 세 또는 4 층을 사용합니다.

  • Critical (P1) – 시스템 다운, 보안 침해, 데이터 손실. 즉시 필요, 24/7 응답.
  • High (P2) – 성능, 여러 사용자가 영향을 미치는 잠재적 위반 지표. 15-30 분 이내에 응답.
  • Medium (P3) – 단일 사용자 문제, 비범성 경고, 용량 임계. 4~8 시간 이내에 응답.
  • Low (P4) – 정보, 화장품, 또는 예약된 유지보수 알림. 일일 대기 중 검토.

이 웹 사이트는 귀하가 웹 사이트를 탐색하는 동안 귀하의 경험을 향상시키기 위해 쿠키를 사용합니다. 이 쿠키들 중에서 필요에 따라 분류 된 쿠키는 웹 사이트의 기본적인 기능을 수행하는 데 필수적이므로 브라우저에 저장됩니다. 또한이 웹 사이트의 사용 방식을 분석하고 이해하는 데 도움이되는 제 3 자 쿠키를 사용합니다. 이 쿠키는 귀하의 동의하에 만 브라우저에 저장됩니다. 이러한 쿠키를 거부 할 수도 있습니다. 이러한 쿠키 중 일부를 선택 해제하면 검색 환경에 영향을 미칠 수 있습니다.

리뷰의 정의

이 웹 사이트는 귀하가 웹 사이트를 탐색하는 동안 귀하의 경험을 향상시키기 위해 쿠키를 사용합니다. 이 쿠키들 중에서 필요에 따라 분류 된 쿠키는 웹 사이트의 기본적인 기능을 수행하는 데 필수적이므로 브라우저에 저장됩니다. 또한이 웹 사이트의 사용 방식을 분석하고 이해하는 데 도움이되는 제 3 자 쿠키를 사용합니다. 이 쿠키는 귀하의 동의하에 만 브라우저에 저장됩니다. 이러한 쿠키를 거부 할 수도 있습니다. 이러한 쿠키 중 일부를 선택 해제하면 검색 환경에 영향을 미칠 수 있습니다. 이러한 쿠키 중 일부를 선택 해제하면 검색 환경에 영향을 미칠 수 있습니다.

응답 프로토콜 및 Runbooks

각 경고 카테고리에 대해 정확히 무엇을 할 수 있습니다. runbook은 다음과 같습니다.

  • Initial triage steps – alert를 false Positive가 아닌, 관련 로그를 확인, 영향을 받은 사용자 또는 시스템을 확인한다.
  • Escalation path – 문제가 온 콜 엔지니어의 범위 밖에 있는지 문의하는 분.
  • 부동작 – 즉시 운동 또는 보조 단계.
  • 해결 검증 – 문제 확인 방법은 완전히 해결 및 모니터링 복구.
  • Post-incident notes – 나중에 분석에 대한 검색을 기록하는 곳.

위키 또는 다이렉트로투스의 상점 실행 책은 기본 지식베이스이므로 버전이 제어되고 업데이트가 용이합니다. 영감에 대해서는 Atlassian의 가이드를 실행하는 가이드를 참조하십시오. . 스크린 샷, 명령 스니펫 및 높은 압력 사고 중 주변성을 줄이기 위해 예상된 출력 샘플을 고려하십시오.

자동화 전략은 Cognitive Load를 감소시킵니다.

지능형 경보 상관

이 웹 사이트는 귀하가 웹 사이트를 탐색하는 동안 귀하의 경험을 향상시키기 위해 쿠키를 사용합니다. 이 쿠키들 중에서 필요에 따라 분류 된 쿠키는 웹 사이트의 기본적인 기능을 수행하는 데 필수적이므로 브라우저에 저장됩니다. 또한이 웹 사이트의 사용 방식을 분석하고 이해하는 데 도움이되는 제 3 자 쿠키를 사용합니다. 이 쿠키는 귀하의 동의하에 만 브라우저에 저장됩니다. 이러한 쿠키 중 일부를 선택 해제하면 검색 환경에 영향을 미칠 수 있습니다. 이러한 쿠키 중 일부를 선택 해제하면 검색 환경에 영향을 미칠 수 있습니다.

자동치료 및 자기치료

이 웹 사이트는 귀하가 웹 사이트를 탐색하는 동안 귀하의 경험을 향상시키기 위해 쿠키를 사용합니다. 이 쿠키들 중에서 필요에 따라 분류 된 쿠키는 웹 사이트의 기본적인 기능을 수행하는 데 필수적이므로 브라우저에 저장됩니다. 또한이 웹 사이트의 사용 방식을 분석하고 이해하는 데 도움이되는 제 3 자 쿠키를 사용합니다. 이 쿠키는 귀하의 동의하에 만 브라우저에 저장됩니다. 이러한 쿠키 중 일부를 선택 해제하면 검색 환경에 영향을 미칠 수 있습니다. 이러한 쿠키 중 일부를 선택 해제하면 검색 환경에 영향을 미칠 수 있습니다.

스토링 및 소음 감소

Alert 피로는 실제 위협입니다. 쿼터를 투수하는 데 실패한 구성 요소를 방지하기 위해 리소스를 throttling을 구현합니다. 예를 들어 단일 서버가 10 분 동안 100 디스크 경고를 생성하면 측정 값으로 하나의 경고로 석탄을 생성합니다. 마찬가지로, 계획된 가동 중단 시간 동안 경고를 억제하는 유지 보수 창을 사용합니다. 일반적으로 "noise Audit"을 실행하여 ‐chatty 모니터를 찾아 조정하십시오. Google의 :[FLT:]:[FLT:]:]: 의 실제적인 경고를 위한 것입니다. 이 단계는 15분간의 경고를 방지합니다.

팀 역할과 책임

1 차 및 2 차 On-Call 교체

이 웹 사이트는 귀하가 웹 사이트를 탐색하는 동안 귀하의 경험을 향상시키기 위해 쿠키를 사용합니다. 이 쿠키들 중에서 필요에 따라 분류 된 쿠키는 웹 사이트의 기본적인 기능을 수행하는 데 필수적이므로 브라우저에 저장됩니다. 또한이 웹 사이트의 사용 방식을 분석하고 이해하는 데 도움이되는 제 3 자 쿠키를 사용합니다. 이 쿠키는 귀하의 동의하에 만 브라우저에 저장됩니다. 이러한 쿠키를 거부 할 수도 있습니다. 이러한 쿠키 중 일부를 선택 해제하면 검색 환경에 영향을 미칠 수 있습니다. 이러한 쿠키는 이러한 쿠키를 사용하여 웹 사이트의 사용 방식을 분석하고 이해하는 데 도움이되는 제 3 자 쿠키를 사용합니다.

Alert 리뷰 소유자 (Daily/Weekly)

P3 및 P4 아이템에 대한 일일 경고 검토를 수행하는 사람이나 작은 팀이 할당합니다. 이 역할은 또한 잘못된 긍정적 인, 업데이트 된 런 책을 유지하고,주의를 필요로하는 주력 패턴을 유지합니다. 검토 소유자는 30 분마다 매일을 차단해야하며, 대시보드를 검토하고, 자동화 된 요약과 교차 참조를 선택하십시오. 또한, 이전 날의 모든 P1-P2 사건이 게시되어있는 것을 확인해야합니다. 이 작업은 다시 시작된 작업을 중단하고, 이 작업을 중단하는 데 필요한 모든 것을 방지해야합니다.

포스트 인시덴트 검토 (PIR) 책임

PIR은 P1, 또는 P2를 반복하는 경우, 48 시간 내에 게시물 인시던트 리뷰를 일정합니다. PIR는 On-call 엔지니어, 리뷰 소유자 및 영향을받는 서비스에서 이해 관계자를 포함합니다. 목표는 경고가 불을 밝히는 이유를 식별하는 것입니다. 응답이 무장한 이유와 프로세스 또는 자동화가 재발을 방지 할 수있는 변경 사항이 있습니다. 공유 된 문서의 결과를 작성하십시오. 학습 도구로 치료하면 비난 운동이 아닙니다. PIR은 실제로 PIR이 시작된 상태로 유지되는 것을 보증합니다. PIR은 PIR가 분기별로 개선 된 프로젝트가 시작되기 때문에 PIR가 분기별로 개선 될 수 있습니다.

효과적인 측정을 위한 주요 성과 지시자

일상을 보장하기 위해 계산을 추적하고 병목을 식별합니다.

  • Acknowledge (MTTA)]에 대한 시간 - 신속하게 인간의 경고를 선택. P1의 5 분 미만의 대상, P2에 대한 15.
  • Mean Time to Resolve (MTTR) – acknowledgment에서 resolution. 벤치 마크는 업계별로 다르지만 일관된 감소는 개선을 보여줍니다.
  • False Positive Rate] – 경고의 백분율은 소음으로 해소됩니다. 높은 거짓 긍정적 인 결과를 나타내는 튜닝이 필요합니다.
  • Backlog Age – 리뷰 전에 얼마나 낮은 ‐severity alerts sit. 나이는 검토 간격을 초과하지 않아야 합니다.
  • Response Protocol Adherence] – runbook이 뒤로 표시되는 경고의 비율(수신 로그를 통해 확인). 90% 이상에 대한 경고.

MTTA가 상승하기 시작하면, 호출 프로세스가 조정이 필요할 수 있습니다. false 긍정적 인 경우 40 %를 초과하면 튜닝 워크샵을 개최합니다. 또한 하루에 소스 당 경고 수를 추적합니다. 한 소스에서 갑작스런 스파이크는 종종 영구적 인 수정을 필요로하는 재커링 문제 또는 재커링 문제를 나타냅니다.

일반적인 Pitfalls 및 Them을 방지하는 방법

모든 Anomaly에 대한 이상적

이 웹 사이트는 귀하가 웹 사이트를 탐색하는 동안 귀하의 경험을 향상시키기 위해 쿠키를 사용합니다. 이 쿠키들 중에서 필요에 따라 분류 된 쿠키는 웹 사이트의 기본적인 기능을 수행하는 데 필수적이므로 브라우저에 저장됩니다. 또한이 웹 사이트의 사용 방식을 분석하고 이해하는 데 도움이되는 제 3 자 쿠키를 사용합니다. 이 쿠키는 귀하의 동의하에 만 브라우저에 저장됩니다. 이러한 쿠키를 거부 할 수도 있습니다. 이러한 쿠키 중 일부를 선택 해제하면 검색 환경에 영향을 미칠 수 있습니다.

주간 위생 검토를 건너

이 웹 사이트는 귀하가 웹 사이트를 탐색하는 동안 귀하의 경험을 향상시키기 위해 쿠키를 사용합니다. 이 쿠키들 중에서 필요에 따라 분류 된 쿠키는 웹 사이트의 기본적인 기능을 수행하는 데 필수적이므로 브라우저에 저장됩니다. 또한이 웹 사이트의 사용 방식을 분석하고 이해하는 데 도움이되는 제 3 자 쿠키를 사용합니다. 이 쿠키는 귀하의 동의하에 만 브라우저에 저장됩니다. 이러한 쿠키를 거부 할 수도 있습니다. 이러한 쿠키 중 일부를 선택 해제하면 검색 환경에 영향을 미칠 수 있습니다.

그들은 긴요한 될 때까지 낮은 심각성 경고를 무시

이 웹 사이트는 귀하가 웹 사이트를 탐색하는 동안 귀하의 경험을 향상시키기 위해 쿠키를 사용합니다. 이 쿠키들 중에서 필요에 따라 분류 된 쿠키는 웹 사이트의 기본적인 기능을 수행하는 데 필수적이므로 브라우저에 저장됩니다. 또한이 웹 사이트의 사용 방식을 분석하고 이해하는 데 도움이되는 제 3 자 쿠키를 사용합니다. 이 쿠키는 귀하의 동의하에 만 브라우저에 저장됩니다. 이러한 쿠키 중 일부를 선택 해제하면 검색 환경에 영향을 미칠 수 있습니다. 이러한 쿠키 중 일부를 선택 해제하면 검색 환경에 영향을 미칠 수 있습니다.

새로운 팀 구성원을위한 교육 부족

새로운 엔지니어가 참여할 때, 그들은 경고 검토 및 응답으로 손을 ‐ 연습해야합니다. 첫 번째 몇 가지 교대를 위해 수석으로 쌍, 노후화 환경에서 가장 경고를 사용, 문서화된 온보딩 체크리스트를 제공합니다. 좋은 예는 PagerDuty on‐call training guide]입니다. 또한, 트레이너가 생산에 영향을 미치지 않고 경고를 화재 할 수있는 "sandbox" 모니터링 환경을 만듭니다. 이 운동은 현재 중요한 운동을 사용하여 중요한 운동을 수행하는 중요한 사건을 강조합니다.

조직이 성장함에 따라 루시를 확장

중소기업청에서

이 웹 사이트는 귀하가 웹 사이트를 탐색하는 동안 귀하의 경험을 향상시키기 위해 쿠키를 사용합니다. 이 쿠키들 중에서 필요에 따라 분류 된 쿠키는 웹 사이트의 기본적인 기능을 수행하는 데 필수적이므로 브라우저에 저장됩니다. 또한이 웹 사이트의 사용 방식을 분석하고 이해하는 데 도움이되는 제 3 자 쿠키를 사용합니다. 이 쿠키는 귀하의 동의하에 만 브라우저에 저장됩니다. 이러한 쿠키를 거부 할 수도 있습니다. 이러한 쿠키 중 일부를 선택 해제하면 검색 환경에 영향을 미칠 수 있습니다.

크로스 테암 코디네이션

이 웹 사이트는 귀하가 웹 사이트를 탐색하는 동안 귀하의 경험을 향상시키기 위해 쿠키를 사용합니다. 이 쿠키들 중에서 필요에 따라 분류 된 쿠키는 웹 사이트의 기본적인 기능을 수행하는 데 필수적이므로 브라우저에 저장됩니다. 또한이 웹 사이트의 사용 방식을 분석하고 이해하는 데 도움이되는 제 3 자 쿠키를 사용합니다. 이 쿠키는 귀하의 동의하에 만 브라우저에 저장됩니다. 이러한 쿠키를 거부 할 수도 있습니다. 이러한 쿠키 중 일부를 선택 해제하면 검색 환경에 영향을 미칠 수 있습니다. 이러한 쿠키 중 일부를 선택 해제하면 검색 환경에 영향을 미칠 수 있습니다.

Incident Management Platforms와 통합

이 웹 사이트는 귀하가 웹 사이트를 탐색하는 동안 귀하의 경험을 향상시키기 위해 쿠키를 사용합니다. 이 쿠키들 중에서 필요에 따라 분류 된 쿠키는 웹 사이트의 기본적인 기능을 수행하는 데 필수적이므로 브라우저에 저장됩니다. 또한이 웹 사이트의 사용 방식을 분석하고 이해하는 데 도움이되는 제 3 자 쿠키를 사용합니다. 이 쿠키는 귀하의 동의하에 만 브라우저에 저장됩니다. 이러한 쿠키를 거부 할 수도 있습니다. 이러한 쿠키 중 일부를 선택 해제하면 검색 환경에 영향을 미칠 수 있습니다.

Alert 소유권의 문화 구축

이 웹 사이트는 귀하가 웹 사이트를 탐색하는 동안 귀하의 경험을 향상시키기 위해 쿠키를 사용합니다. 이 쿠키들 중에서 필요에 따라 분류 된 쿠키는 웹 사이트의 기본적인 기능을 수행하는 데 필수적이므로 브라우저에 저장됩니다. 또한이 웹 사이트의 사용 방식을 분석하고 이해하는 데 도움이되는 제 3 자 쿠키를 사용합니다. 이 쿠키는 귀하의 동의하에 만 브라우저에 저장됩니다. 이러한 쿠키를 거부 할 수도 있습니다. 이러한 쿠키 중 일부를 선택 해제하면 검색 환경에 영향을 미칠 수 있습니다.

장기 유지

정기 감사 및 조정

모든 분기에, 모든 경고 규칙과 문턱의 전체 감사를 실행. 6 개월 (일부는 stale이 될 수 있음)에서 화재가없는 것을 제거하십시오. 소스 당 경고 수를 10 대 가장 행동 할 수 있습니다. MTTA의 이전 및 후 비교를 사용하여 변경을 검증합니다. 또한, 호출 교체 일정을 검토하십시오 : 비즈니스 시간과 그 아무도 지나치게됩니다 (예 : 7 일 연속) 또는 임계 값에 대한 제한을 공유하십시오.

지속적인 개선 문화

이 웹 사이트는 귀하가 웹 사이트를 탐색하는 동안 귀하의 경험을 향상시키기 위해 쿠키를 사용합니다. 이 쿠키들 중에서 필요에 따라 분류 된 쿠키는 웹 사이트의 기본적인 기능을 수행하는 데 필수적이므로 브라우저에 저장됩니다. 또한이 웹 사이트의 사용 방식을 분석하고 이해하는 데 도움이되는 제 3 자 쿠키를 사용합니다. 이 쿠키는 귀하의 동의하에 만 브라우저에 저장됩니다. 이러한 쿠키를 거부 할 수도 있습니다. 이러한 쿠키 중 일부를 선택 해제하면 검색 환경에 영향을 미칠 수 있습니다.

Central Command Console에 대한 레버리지 다이렉서

이 웹 사이트는 귀하가 웹 사이트를 탐색하는 동안 귀하의 경험을 향상시키기 위해 쿠키를 사용합니다. 이 쿠키들 중에서 필요에 따라 분류 된 쿠키는 웹 사이트의 기본적인 기능을 수행하는 데 필수적이므로 브라우저에 저장됩니다. 또한이 웹 사이트의 사용 방식을 분석하고 이해하는 데 도움이되는 제 3 자 쿠키를 사용합니다. 이 쿠키는 귀하의 동의하에 만 브라우저에 저장됩니다. 이러한 쿠키를 거부 할 수도 있습니다. 이러한 쿠키 중 일부를 선택 해제하면 검색 환경에 영향을 미칠 수 있습니다. 이러한 쿠키는 이러한 쿠키를 거부 할 수도 있습니다. 이러한 쿠키 중 일부를 선택 해제하면 검색 환경에 영향을 미칠 수 있습니다.

의약

이 웹 사이트는 귀하가 웹 사이트를 탐색하는 동안 귀하의 경험을 향상시키기 위해 쿠키를 사용합니다. 이 쿠키들 중에서 필요에 따라 분류 된 쿠키는 웹 사이트의 기본적인 기능을 수행하는 데 필수적이므로 브라우저에 저장됩니다. 또한이 웹 사이트의 사용 방식을 분석하고 이해하는 데 도움이되는 제 3 자 쿠키를 사용합니다. 이 쿠키는 귀하의 동의하에 만 브라우저에 저장됩니다. 이러한 쿠키를 거부 할 수도 있습니다. 이러한 쿠키 중 일부를 선택 해제하면 검색 환경에 영향을 미칠 수 있습니다.