Ang mga kapaligirang Modern IT ay lumilikha ng mga babala sa bawat layerifellow mula sa mga network firewall at server log upang mag-play ng mga track at mga platapormang SIEM. kung walang kusang rutina, ang mga koponan ay mabilis na nalilipos, ang mga kritikal na signal ay nawawala, at ang tugon ng insidente ay bumababa. Ang isang hindi nagbabago, dokumentadong proseso para sa triing, reviewing, at pagtugon sa mga babala ay binabago ang ingay tungo sa aktiba na mga intibasyon.Ito ay nangangahulugang oras upang ma-mayagap ang mga feature na mga pangkat, walang stampliw na nagbibigay ng mga few.

Mga Koponente ng Isang Mabisang Alert Management Rutina

Alistong Pagtatatribuhan at Kategorisasyon

Ang unang hakbang ay uriin ang dumarating na mga babala sa pamamagitan ng kalubhaan, pinagmulan, at potensiyal na epekto. Ang isang praktikal na schema ay gumagamit ng tatlo o apat na baitang:

  • Critical (P1) – System down, security injury, data loos agad, 24/7 tugon.
  • [[[Padron: – Degrad performance, multiple user apektado, potensiyal na influentations. Tumugon sa loob ng 15–30 minuto.
  • Medium (P3) – Ang isang user isyu, non caltical warning, capital circulation clock ay tumawid. Tumugon sa loob ng 4–8 oras.
  • Low (P4)[ – Informational, kosmetiko, o nakatakdang mga notipikasyon sa pagpapanatili. Review sa panahon ng araw-araw na stand-up.

Ang automate categorization hangga't maaari gamit ang mga tuntunin sa correlation, banta sa pag - aaral ang mga ito, at mga modelo sa pagkatuto ng makina na natututo mula sa nakaraang mga desisyon. Halimbawa, ang mga Sumo Logicić [[FLT]] ay makatutulong sa pag - iimbak ng tunay na kakaibang mga huwaran habang pinipigil ang kilalang ingay.

Pagpapakahulugan sa Isang Kaguruan sa Repaso

Pumili ng isang review frequency na tumutugma sa iyong pangkapaligirang mga kapaligiran ang mga profile ng panganib. Ang mga operasyon ng mataas na calvity (epubliccommerce, negosyo sa pananalapi) ay maaaring mangailangan ng patuloy na pagsubaybay sa pamamagitan ng isang pangalawahing review kada oras. ang mga hindi gaanong kritikal na kapaligiran ay maaaring gumana sa pamamagitan ng tatlong larong request na quadyty. Ang susi ay hindi nagbabago: lumikha ng mga bloke ng kalendaryo, magpatupad ng mga ikot, at hindi kailanman nagkansela ng isang sesyon sa repaso. Gamitin ang isang kabahaging dashboard (Grafan, Kiba ang mga miyembro ng enternoidia, Kiba ang mga pahina, at ang mga sanggunian, at ang mga sanggunian sa bawat isa ay tinitiyak na nasa listahan ng programa.

Mga Sagot at mga Aklat - Patak

Isulat ang eksaktong dapat gawin sa bawat kategoryang alisto. Dapat isama sa runbook:

  • [[Ingles:0] Ang mga hakbang na pang-intelektwal na triahe – Verify the lerd ay hindi maling positibo, suriin ang kaugnay na mga troso, pagtibayin ang mga apektadong tagagamit o sistema.
  • [Escalation path – Sino ang makikipag-ugnayan kung ang isyu ay labas ng on calcalcal engineerizers cover.
  • Mga kilos ng pag-uugali – Immediate workclusion o naglalaman ng mga hakbang.
  • [Kapaki-lutasan – Kung paano mapapatunayan ang isyu ay lubos na nalutas at sinusubaybayan ang mga pagbawi.
  • Ang Post[incident ay nagsasaad ng – Kung saan i-inscript ang mga natuklasan para sa kalaunang pagsusuri.

Store runbooks in a wiki or Directus stage base sa kaalaman kaya sila ay nananatiling bersyong stymphoned at madaling i-update. para sa inspirasyon, tingnan ang Atlassianificers [kailangan ng sanggunian] Para mabawasan ang mga crax sa panahon ng high surpresse episodes. Isaalang-alang ang screenshots, command snipets, at inaasahan ang mga sampol ng output upang mabawasan ang mga spesculation sa panahon ng high surpressure.

Mga Estratehiya ng Automisyon Upang Bawasan ang mga Pasan ng Kognitibong Kognitibo

Matalinong Babalang Pagsisiwalat

Maraming mga babala ang mga sintomas ng parehong ugat na sanhi. Correlation engines (e.g., OpsGenie, PagerDuty, o open survice StreamAlert) group kaugnay na mga pangyayari sa isang insidente.Ito ay pumipigil sa mga alistong bagyo at ang mga tumutugon ay nagtutuon ng pansin sa isang sanhi sa halip na dose-dosensiya ng mga nosyon. Ang mga konfurre correlation window na tumutugma sa iyong karaniwang bigong mga patter-line na halimbawa, 5 minuto para sa mga network horn, 1 oras para sa unti-unting pag-unting pag-unting paggamit, obpsitcompostation (mga subspwer) ay dapat na awtomatikong naka-up, kapag ang mga stancegreadcreadcread. Ang mga stanced na mga stance na mga stance na mga stanced na mga stance na mga stance, kapag ang mga stance na mga stance na mga stack na hindi na mga stack na mga stage ay hindi kusang naka-

Pag - aalis ng Auto at Pag - aalis ng Tubig sa Sarili

Para sa mababang physeverity, paulit - ulit na mga babala, pagsulat ng awtomatikong mga response script. Kung ang isang disk na gamit ay nagbababalang apoy, ang isang cron na trabaho ay maaaring linisin ang lumang mga troso. Kung ang isang serbisyo ay nagiging hindi tumutugon, ang isang stage orchestrator ng container ay maaaring magrererecord nito. Ang mga ⁇ uto ⁇ re ⁇ mediation ay binabawasan ang manu - manong trabaho at hinahadlangan ang pagkakamali ng tao. Gamitin ang isang kasangkapang tulad ng SteckStorm o Rundeck sa mga kondisyon ng pag-shoot sa mga kilos. Document ang bawat playbook upang sa oras ng tao, ang aktudasyon at panatilihin ang pag-ed.

Pag - urong at Pagbabawas ng Ingay

Ang pagiging alisto ay isang tunay na banta. Implement per physource throtling upang maiwasan ang isang bumabagsak na bahagi mula sa pagbaha ng queue. Halimbawa, kung ang isang server ay makagawa ng 100 disk babala sa 10 minuto, i - coal ang mga ito na alisto sa isang metric count. Gamitin din ang mga bintanang pang - pagmamantini upang sugpuin ang mga babala sa panahon ng isinaplanong pagbaba. Ang regular na pagtakbo ng isang cinoise auditificituvit, ang mga ito ay mag - akawt at mag - tono sa ibabaw ng mga ranger.

Mga Papel at Pananagutan ng Pangkat

Pangunahin at Pangalawaryo sa Pag - aayos ng Hulod

Laging may isang escalatory hierarkiya: isang pangunahing tagatugon na humahawak ng P1–P2 ang agad na alisto, at isang sekwensiya na humahawak kung ang primary ay okupado o kung ang isyu ay sumasakop sa maramihang domain. regulatories rotations na may heograpikong sumusunod sa pagsaklaw ng calthesun kung maaari. Mga kasangkapang katulad ng Page-eorDuty o Opsgenie ay maaaring mag-ebolb ng automate at tiyakin na ang mga pag-ikot ay palaging umaabot sa isang mainit na katawan. Para sa mas maliit na mga koponan, isaalang alang ang isang ⁇ bddddddddyimento kung saan ang dalawang inhinyero na mga pangunahing nakabase sa mga pangunahing pag-sayt sa mga element: ang mga pangunahing pag-spwersayting sa mga prosesong pang-gawa (mga pangunahing pag-gawang unspwersa-gawa, ang mga panimulang pang-gawa bago ang mga unsiyaliksik sa mga unsiyaliksik sa mga unsiyalvang pang-pang-kade

Alistong Repaso May-ari (Daily/Weekly)

Ang pag-sign ng isang tao o isang maliit na koponan upang isagawa ang araw-araw na alistong review para sa P3 at P4 mga bagay. Ang papel na ito ay nagpapanatili rin ng alistong backlogi ⁇ pag-alis ng maling mga positibo, pag-apruba ng mga runbook, at mga spesipikong mga padron na nangangailangan ng pansin sa inhinyeriya. Ang mga may-ari ng review ay dapat na harangan ang 30 minuto bawat araw sa parehong oras, repasuhin ang dashboard, at cross surreference sa anumang mga indibidwal na mga summarkment. Isa parindience ng mga tao ay dapat mag-ang mag-ari ng maikling impormasyon sa loob ng mga episodes. Ang lahat ng mga insidente ng mga episodes ay dapat mag-P2 mula sa dating postcing pag-ed na ito ay dapat mag-int na replecresult na nagbibigay ng mga postcing recepport. Ang mga postcideved. Ang mga postcidevelood na ito ay dapat mag-concled. Ang mga split ay dapat mag-out sa mga spellig pang-out.

Post ⁇ Incident Review (PIR) Mga Pananagutan

Pagkatapos ng anumang mahalagang insidente (P1, o paulit - ulit na P2), mag - iskedyul ng post phystincident review sa loob ng 48 oras. Dapat isama ng PIR ang on calccal engineer, ang nagrerepaso, at isang tagahawak ng tulos mula sa apektadong serbisyo. Ang tunguhin ay upang malaman kung bakit ang alistong paputok, kung paano nagkaroon ng reaksiyon ang mga ito, at kung anong mga pagbabago sa mga proseso o automasyon ang makahahadlang sa muling pag - aayos. Isulat ang mga natuklasan sa isang dokumentong may bahagi ng bansa; ituring ito bilang isang kasangkapang nakapagtuturo, hindi isang gawaing may kinalaman sa gawaing ibinigay ng PIR.

Mga Tagapagpakilala na May - Kakayahang Magsukat ng Eksplikasyon

Tingnan ang mga metriko upang matiyak na ang iyong rutina ay gumagana at upang makilala ang mga takilya sa bote:

  • [Mean Time to Evoct (MTTA)[ – Gaano kabilis na kinukuha ng isang tao ang alerto. Target sa ilalim ng 5 minuto para sa P1, sa ilalim ng 15 para sa P2.
  • Mean Time to Require (MTR)[ – Mula sa pagkilala hanggang sa resolusyon. Ang mga Benchmark ay nagkakaiba-iba sa pamamagitan ng industriya, ngunit ang hindi nagbabagong pagbabawas ay nagpapakita ng pagpapabuti.
  • [[Corgative Accessage Crain – Percentage of warists na pinawalang-bisa bilang ingay.[kailangan ng sanggunian] Ang mga mataas na maling positibong pag-iisip ay nagpapahiwatig ng pag-aayos.
  • Backlog Age – Gaano katagal ang pagka-senso ng grossence bago ang review. Ang edad ay hindi dapat lumampas sa iyong interview interval.
  • Response Protocol Adhore – Percentage of warnings kung saan ang runbook ay sinundan (pinadaraan sa audit logs).Aim para sa higit sa 90%.

Kung magsisimulang umakyat ang MTA, ang proseso ng pag - alog sa pamamagitan ng calcle ay maaaring mangailangan ng pagbabago. Kung ang maling mga positibo ay mahigit 40%, magkaroon ng isang maayos na workshop.

Karaniwang mga Patibong at Kung Paano Maiiwasan ang mga Ito

Labis na Pakikipagpunyagi sa Bawat Anatomalya

Sa halip, gumamit ng estadistikang mga saligan: alisto lamang kapag ang paglihis ay lumampas sa dalawa o tatlong pamantayang paglihis. Isang kasangkapang gaya ng Prometheus na may kasamang Alertmarger ang maaaring magpatupad ng ⁇ 50% na dami ng mga data ⁇ at ⁇ ang ginagamit sa halip na ⁇ ang mga stat na ito upang makabagay sa mga biglaang tusukdos.

Pag - iiski sa Linggu - linggong Repaso sa Kalinisan

Maraming koponan ang nagsisimulang malakas ngunit ang lingguhang audit ay nagreresulta sa pag-iinflures, isama ang recime reast reassignment sa isang paulit-ulit na pangyayari (hal., Lunes ng umaga team standup). Block 30 minuto upang repasuhin ang mga nakasarang mga babala, update runbooks, at pruiture deficment. Gamitin ang panahong ito upang suriin din kung ang anumang nakatakdang mga bintana ng maintenance at upang repasuhin ang mga bagong impenditableng tuntunin mula sa nakaraang linggo. Ang isang countation obstatation review para sa review ay tumitiyak na walang kulang: na lahat ng mga paglalarawan ay tumpak, ang ilang mga pagsubok sa autoremediation at ang mga element na ang mga elekweeksyon sa pag-compil.

Ang Pagwawalang - Bahala sa Mababang Kababaan ng Kagubatan ay Nagbibigay - Babala Hanggang sa Maging Mapanganib Ito

Ang P4 na nagbababala tungkol sa isang mabagal lumagong log file ay maaaring ipagwalang - bahala sa loob ng mga linggo hanggang sa ang disk ay punó at ibaba ang serbisyo.Treatuhin ang mababang physeverity bilang mga palatandaan ng pagmamantini.Automate ang mga madaling gamitin (katulad ng pag - ikot ng log) at maglaan ng maliliit na kahon ng oras para sa iba pang mga bagay sa bawat karera. Para sa mga babala na hindi maaaring baguhin, lumikha ng isang dedikadong cibert na pagkakautang gaya ng teknikal na utang.

Kulang ng Pagsasanay Para sa mga Miyembro ng Bagong koponan

Kapag ang isang bagong inhinyero ay sumali sa isang masiglang pagrirepaso at pagtugon, gumamit ng mga babala sa kapaligiran, at maglaan ng isang dokumentadong listahan ng mga paskil. Ang mga may - edad na sa unang mga pagbabago, gamitin ang mga nakagayang babala sa isang tahimik na kapaligiran, at maglaan ng isang dokumentadong impormasyon tungkol sa pag - irekord. Ang mga taga - train ay maaaring maging alisto nang hindi naaapektuhan ang regular na pagsasanay sa mesa.

Pag - opera sa Rutina Habang Lumalaki ang Iyong Organisasyon

Mula sa Maliit na Pangkat Tungo sa Ganap na mga Operasyon

Sa isa o dalawang inhinyero, ang alistong pangangasiwa ay impormal. Habang lumalaki ang mga headcounty, nagiging pormal ang pag - ikot, namumuhunan sa awtomasyon, at lumilikha ng isang dedikadong papel na ⁇ observity ⁇ . Gamitin ang isang kasangkapang gaya ng Directus upang bumuo ng isang sensable na tagabantay ng kaugalian na sama - samang nag - uugnay sa pagsubaybay ng impormasyon, mga runbook, at mga timeline ng insidente na nagbibigay sa lahat ng isang paisahang salamin. Kapag ang pangkat ay lumampas sa limang miyembro, nagpapakilala ng isang lingguhang bahagi ng isang linggo sa pag - linggo sa pag - uutos upang talakayin ang alistong mga pamamaraan at mga leksiyon.

Pag - aayos ng Cross Team

Kapag ang mga babala ay nag-aanunsyo ng imprastraktura, aplikasyon, at mga pangkat ng seguridad, ay nagtatatag pa rin ng isang kabahaging sistema ng klasipikasyon at isang karaniwang channel (e.g., Slack, Microsoft Teams) kung saan ang lahat ng mga kritikal na mga babala ay nag-eeksperimento pa rin ng sarili nitong review cadence, ngunit ang channel ay tumitiyak ng walang babala ay iloed. Lingguhang krus teriostatam syntoms ay maaaring makatukoy sa paulit-ulit na pag-ulit na mga ektiba ng kamay. hinggil sa bawat uri ng mga layunin ng serbisyo (SO) na dapat bigyan ng mga elekweekweekweektasyon, na nagbibigay ng mga resolusyon, na mga resolusyon at mga resolusyon.

Panunuyo sa Pamamagitan ng mga Platanyo ng Integrasyon ng mga Tagahanga

Pag - usapan ang iyong alistong rutin sa mas malawak na pangangasiwa sa insidente. Kapag lalong naging alisto ang isa, dapat itong awtomatikong lumikha ng tiket sa insidente, mag - ingat sa mga may hawak ng tulos, at simulan ang timeline para sa post phreincident review. Mga kagamitang gaya ng Service Now, Jira Service Management, o FireHydrant ang mga tubong ito. Kumuha ng mga notasyon Mga computer ng mga kagamitang may kinalaman sa insidente[FL:1] Upang piliin kung ano ang angkop sa iyong laki.

Paggawa ng Isang Kultura ng Alistong Pagmamay - ari

Ang isang rutina ay malakas lamang gaya ng mga taong sumusunod dito. Foster isang kultura kung saan ang bawat miyembro ng koponan ay nakadarama ng pananagutan sa kalusugan ng sistemang paunawa. pasiglahin ang mga inhinyero na imungkahi ang mga deleksiyon o pagbabago upang bigyang- babala ang mga tuntunin na hindi na nagsisilbi sa isang layunin. Ipagdiwang kapag ang isang miyembro ng koponan ay nagbabawas ng maling positibong dami o mga kasama sa kotse na isang manu-manong tugon. gawing isang nakatayo na agendamental na bagay sa recounctions. Kapag ang isa ay kinikilala sa paghuli ng kritikal na alistong maaga, itampok ito sa isang team-wide-wice o chatporate ang ninanais na pag-ed ang pag-ed na pag-edit-time-time-time-time-time-time-times., bawasan ang mga pag-timescreasying na pag-d na pag-d.

Pagpapanatili ng Mahabang Termine

Mga Audit at Tuning sa Panahon

Bawat sulok, ay may ganap na audit sa lahat ng mga patakaran at mga panimulang bagay. Alisin ang anumang hindi pa napuputok sa loob ng anim na buwan (maaaring nawawala na ang mga ito). Bawat pinagmumulan ng babala sa nangungunang sampung pinaka-maagang mga tuntunin at mga panimulang mga tuntunin. Gamitin ang isang bago ang Ōlandstrofic pagkatapos ihambing ang MTA at ang maling positibong bilis upang patunayan ang mga pagbabago. Respleclecations on election iskedyul: Tiyakin ang mga pagsaklaw na ang mga pagtutugma sa mga oras ng negosyo at na walang sinuman ang na na na hindi nababanggo (e.g., wala pang 7 araw ng mga unang pagbabago sa mga pag-sunod sa mga pag-tawag) ang nag-a-tawag sa pag-tawag sa isang dokumento upang magkaroon ng isang de-oras para sa mga ent.

Patuloy na Pagbutihin ang Kultura

Kung ang isa ay gumugol ng 30 minuto sa pagsusuri sa isang paulit - ulit na maling paraan, gantimpalaan ang mga ito sa paggamit ng sariling - yari sa mga plano. Post ⁇ incident reviews: ⁇ Anong pagbabago ang dapat gawin ng mga miyembro ng team upang maging mas madali ang insidenteng ito?[T] Ang mga pagbabagong iyon ay bawasan ang isang buháy na dokumento. Sa tatlong panimulang pagtalakay, panatilihin ang isang ⁇ Routine Pagpapaunlad ng programa sa likod ng programa kung saan ang mga miyembro ng koponan ay maaaring magbigay ng mga mungkahi. prioritize ang mga bagay na batay sa epekto (e., pagbabawas ng MTA, pagbabawas ng M&TA, pagbabawas ng ingay sa bawat isa sa tatlong pag - aayos ng programa.

Ang Leverage Directus Para sa Isang Central Command Console

Dahil ang Directus ay isang hindi gumagalaw na plataporma ng CMS at data, maaari itong magsilbing pundasyon ng iyong alistong pangangasiwa. Pagkonekta nito sa iyong pagsubaybay sa API (Datadog, Prometheus, Grafana) at gumawa ng isang kaugalian na may kasamang mga bagay na nagpapahiwatig ng tunay na mga babala sa panahon ng paghahanda, mga runbook, sa mga iskedyul ng pag - iwas sa pag - iwas sa mga bagay na maaaring pumasok ang bawat miyembro ng pangkat at tingnan kung ano ang talagang kailangan, na may kaugnayan at pagkilos. Ang sentralisasyong ito ay lubhang nakababawas sa iba't ibang yugto ng mga gatla at sa mga pangyayaring pansuporta.

Pagsasaayos

Ang pag - aayos ng isang pormal na rutin para sa pagrerepaso at pagtugon sa mga babala ay hindi isang gawaing ginawa ng mga taga - Ghana para sa kanilang mga anak kundi isang gawaing dapat gawin, pag - isipan ang mga bagay na dapat gawin, pag - isipan ang iyong alistong mga hakbang, at ang paggawa ng isang hakbang na angkop sa inyong teamides realations.