Kwa nini hili ni muhimu

Kazi ya zamu za kuitwa ina umbo. Tahadhari inalia. Mhandisi aliyechoka anafungua kitabu cha uendeshaji, anafuata mfululizo wa hatua, anaanzisha upya kitu, anakagua kimefanya kazi, na kurudi kulala. Wiki moja baadaye tahadhari ileile inalia, na hatua zilezile zinafuatwa. Baada ya mara ya kumi, mtu anasema: kwa nini mtu anafanya hili?

Wako sahihi. Kurudia suluhisho linalojulikana kwa mikono ni polepole, lina makosa, na huharibu watu wanaofanya. Hatua zilezile, zikiandikwa kama msimbo, huendeshwa kwa sekunde, kwa njia ileile kila mara, na huacha rekodi. Wikipedia inaeleza vitabu vya uendeshaji kama mkusanyiko wa taratibu za kawaida ambazo mwendeshaji hutekeleza. Kuvifanya viweze kutekelezwa, na katika baadhi ya visa kuvifanya viendeshwe vyenyewe, ni hatua kutoka nyaraka hadi uendeshaji otomatiki.

Hatua hiyo pia ni hatari. Kitabu cha uendeshaji kinachosomwa na binadamu hupitia busara ya binadamu katika kila hatua. Msimbo hauipiti. Kuanzisha upya kiotomatiki kusikofaa kunaweza kujirudia milele, au kuangusha huduma yenye afya, au kuficha tatizo la ndani zaidi hadi liwe baya zaidi. Kuzimika kwingi kumerefushwa au kusababishwa na urekebishaji wenye nia njema uliofanya jambo lisilo sahihi haraka. Wikipedia inaeleza kompyuta ya kujiendesha, lengo la muda mrefu la mifumo inayojisimamia, na somo la vitendo ni kwamba kujiendesha kunahitaji vikomo.

Mada hii inaeleza jinsi ya kusonga kutoka nyaraka hadi hati hadi kitendo cha kiotomatiki kwa uangalifu. Inajenga juu ya usimamizi wa maarifa (mada 3.9 — Usimamizi wa Maarifa), ufuatiliaji (mada 3.10 — Ufuatiliaji na Usimamizi wa Matukio ya Mfumo), usimamizi wa matukio ya hitilafu (mada 3.2 — Usimamizi wa Matukio ya Hitilafu), na mkakati wa uendeshaji otomatiki (mada 6.1 — Mkakati wa uendeshaji otomatiki). Inaunganishwa na uendeshaji wa AI (mada 5.2 — AIOps) na mawakala wanaotenda (mada 5.5 — AI ya kiwakala na usimamizi wa binadamu).

Dhana kuu

Kitabu cha uendeshaji. Utaratibu ulioandikwa kwa kazi au hali mahususi inayojirudia ya uendeshaji. Wikipedia inaeleza vitabu vya uendeshaji. Kitabu kizuri cha uendeshaji kina kichocheo, hatua zilizohesabiwa, matokeo yanayotarajiwa, hatua ya uthibitisho, na njia ya kupandisha. Tazama mada 3.9 — Usimamizi wa Maarifa.

Uendeshaji otomatiki wa kitabu cha uendeshaji. Kutekeleza kitabu cha uendeshaji kama msimbo unaotekeleza baadhi au hatua zake zote, kwa kawaida ukianzishwa na mtu kutoka kwa kiweko au amri ya soga, au na tukio la mfumo. Unahifadhi mantiki ya kitabu cha uendeshaji, ukiwa na faida ya kasi, uthabiti, na rekodi.

Urekebishaji wa kiotomatiki. Hatua ya kurekebisha ya kiotomatiki kujibu tahadhari au tukio, bila mtu kuianzisha. Mifano ni pamoja na kuanzisha upya mchakato ulioshindwa, kusafisha saraka ya muda iliyojaa, kupanua kundi la wafanyakazi, au kuhamia mbadala. Makala ya Wikipedia kuhusu kompyuta ya kujiendesha inaeleza mifumo inayogundua na kurekebisha makosa yake kama lengo. Kwa vitendo, urekebishaji wa kiotomatiki unafunika seti finyu ya makosa yanayoeleweka vizuri.

Mfuatano. Timu kwa kawaida hupitia hatua: kitabu cha uendeshaji kilichoandikwa; kitabu cha uendeshaji chenye hati ambazo mtu anaendesha; kitabu cha uendeshaji ambacho mtu anaanzisha kwa amri moja, huku hati ikikusanya ukaguzi kwanza; tahadhari inayopendekeza hatua na kuomba idhini; na tahadhari inayoendesha hatua peke yake ndani ya vikomo. Kila hatua inahitaji ushahidi kutoka iliyotangulia. Usiruke hatua kwa vitendo vyenye athari halisi.

Kinachostahili hatua ya kiotomatiki. Kosa la kawaida, ambalo sababu na suluhisho vinaeleweka vizuri, ambalo suluhisho lake ni salama na linaweza kubatilishwa, na ambalo dalili yake inalitambulisha kwa kuaminika. Mifano ni mfanyakazi asiye na hali aliyekwama au saraka ya kumbukumbu inayojaa. Wagombea duni ni pamoja na chochote kinachofuta data, kubadilisha ufikiaji, au kinachotegemea busara kuhusu athari ya biashara.

Masharti ya usalama. Kabla ya kutenda, kagua kwamba hali inalingana kweli: tahadhari ni ya sasa, huduma iko katika hali inayotarajiwa, hakuna upelekaji au matengenezo yanayoendelea, na kitendo hakijaendeshwa hivi punde. Baada ya kutenda, thibitisha matokeo. Wikipedia inaeleza dry run, mazoezi yanayoonyesha kitakachotokea bila kukifanya; ni hali yenye manufaa kwa uendeshaji otomatiki mpya.

Vikomo. Weka kikomo cha mara ngapi kitendo kinaweza kuendeshwa kwa kipindi, mifano mingapi kinaweza kugusa kwa wakati mmoja, na kinaweza kuendeshwa kwa muda gani. Wikipedia inaeleza kikomo cha kiwango. Kikomo hugeuza kukimbia kusikodhibitiwa kuwa tukio lenye mipaka, na kuzidi kikomo kunapaswa kumwita mtu.

Vikata mzunguko na kuchelewesha. Kitendo cha kiotomatiki kikishindwa mara kwa mara au kuwaka mara kwa mara, simama na upandishe badala ya kujaribu tena milele. Wikipedia inaeleza mfumo wa kikata mzunguko, ambapo kushindwa kunakorudiwa huanzisha swichi inayosimamisha majaribio zaidi kwa muda. Ongeza vipindi kati ya majaribio tena na hysteresis, inayoelezwa na Wikipedia, kuzuia kuyumba kati ya hali.

Kutoathiriwa na marudio (idempotence). Kitendo ambacho ni salama kurudiwa. Wikipedia inaeleza idempotence. Kuanzisha upya huduma ambayo tayari inaanzishwa upya hakupaswi kusababisha dhoruba ya pili ya kuanzisha upya. Buni vitendo vinavyokagua hali kwanza.

Walinzi na kupona kulikojengwa ndani. Majukwaa hutoa mbinu zao za kupona: wasimamizi wa michakato wanaoanzisha upya huduma zilizoanguka, majukwaa ya kontena yanayobadilisha mifano inayoshindwa, na vipima muda vya mlinzi, vinavyoelezwa na Wikipedia, vinavyoweka upya mfumo uliokwama. Pendelea mbinu zilizojengwa ndani kuliko hati maalum pale zinapofaa, na uelewe zinachofanya.

Kuhamia mbadala na kupanua. Kuhamia mbadala kiotomatiki kwenda akiba na kupanua uwezo kiotomatiki ni aina za urekebishaji wa kiotomatiki ambazo majukwaa mara nyingi hutoa. Wikipedia inaeleza kuhamia mbadala na kupanuka kiotomatiki. Pia zinahitaji majaribio na vikomo, kwa kuwa zinaweza kufanya mambo kuwa mabaya zaidi: kuhamia mbadala kulikoanzishwa na hitilafu fupi kunaweza kukatiza huduma yenye afya.

Kuficha matatizo. Uendeshaji otomatiki unaorekebisha kosa kimya unaweza kuficha sababu inayozidi kuwa mbaya. Huduma ikianzishwa upya kila saa, kuanzisha upya ni dalili ya tatizo linalohitaji kurekebishwa. Fuatilia mara ngapi kila uendeshaji otomatiki unawaka na uchukulie kiwango kinachopanda kama tatizo la kuchunguza. Tazama mada 3.3 — Usimamizi wa Matatizo.

Kumbukumbu, ukaguzi, na arifa. Kila kitendo cha kiotomatiki kinapaswa kurekodi kilichokianzisha, kilichokagua, kilichofanya, na matokeo, na kuiarifu timu inayomiliki. Uendeshaji otomatiki wa kimya hudhoofisha uelewa wa mfumo. Wikipedia inaeleza njia za ukaguzi kwa ujumla.

Majaribio. Jaribu uendeshaji otomatiki dhidi ya makosa halisi katika mazingira salama, ikijumuisha visa ambapo ukaguzi unapaswa kusimamisha kitendo. Wikipedia inaeleza uhandisi wa machafuko, zoea la kuingiza kushindwa kwa makusudi, ambalo pia linaweza kujaribu kama urekebishaji unatenda ipasavyo. Tazama mada 3.12 — Usimamizi wa Mwendelezo wa Huduma.

Umiliki na mapitio. Kila uendeshaji otomatiki una mmiliki, unaishi katika udhibiti wa matoleo pamoja na mapitio, na unaonekana katika daftari. Pitia mara kwa mara unawaka mara ngapi, kama ulifanikiwa, na kama sababu ya msingi inapaswa kurekebishwa.

Ufikiaji na usalama. Zana za urekebishaji zina nguvu juu ya uzalishaji. Zipe utambulisho wake wenye ruhusa finyu ambazo kila kitendo kinahitaji, na ulinde msimbo na vichocheo dhidi ya kuingiliwa. Tazama mada 3.13 — Usimamizi wa Usalama wa Taarifa.

Ujuzi wa binadamu. Uendeshaji otomatiki ukishughulikia makosa ya kawaida, watu wanaweza kupoteza hisia ya mfumo. Weka vitabu vya uendeshaji vikisomeka, fanyia mazoezi uendeshaji wa mikono, na ujumuishe uendeshaji otomatiki katika siku za mchezo. Tazama mada 6.1 — Mkakati wa uendeshaji otomatiki.

Lenzi zinavyolingana. Mada hii ni lenzi ya uendeshaji otomatiki katika pointi ya uendeshaji. Zoea la uchapuchapu linapendekeza kusonga juu ya mfuatano kwa hatua ndogo pamoja na mapitio baada ya kila tukio la hitilafu. AI inaweza kupendekeza vitendo na kuchagua vitabu vya uendeshaji, chini ya vikomo vilivyoelezwa hapa. Uchanganuzi hupima viwango vya kuwaka, mafanikio, na matatizo yaliyofichwa.

Mazoea bora

  1. Anza na kitabu kizuri cha uendeshaji. Andika, jaribu, na utumie utaratibu kwa mikono kwanza. Uendeshaji otomatiki wa utaratibu usiofanya kazi unavunjika haraka zaidi tu.
  2. Chagua wagombea kwa uangalifu. Tafuta suluhisho za mara kwa mara, zinazoeleweka vizuri, salama, zinazoweza kubatilishwa zenye ishara ya kuaminika. Panga kwa muda wa zamu uliookolewa na kwa hatari.
  3. Panda ngazi. Hamia kutoka hati hadi kichocheo cha amri moja, hadi kitendo kinachopendekezwa chenye idhini, hadi kitendo cha kiotomatiki ushahidi unapokusanyika tu. Rekodi uamuzi katika kila hatua.
  4. Kagua kabla na baada. Thibitisha kwamba hali inalingana, kwamba hakuna shughuli inayokinzana inayoendelea, na kwamba kitendo kilifanya kazi. Simama na upandishe ukaguzi wowote ukishindwa.
  5. Weka vikomo na kikata mzunguko. Weka kikomo kwa marudio, upeo, na muda. Kitendo kikiwaka mara nyingi mno au kushindwa mara mbili, simama na umwite mtu.
  6. Fanya vitendo visiathiriwe na marudio na viweze kubatilishwa. Kagua hali kwanza, na uandike njia ya kurudi. Jaribu yote mawili.
  7. Rekodi, arifu, na ufanye vionekane. Rekodi kila kitendo cha kiotomatiki, iambie timu inayomiliki, na uonyeshe viwango vya kuwaka kwenye dashibodi.
  8. Rekebisha sababu. Hesabu mara ngapi kila uendeshaji otomatiki unawaka, na uibue tatizo kiwango kikiwa juu au kinapanda. Chukulia uendeshaji otomatiki kama daraja la suluhisho, si mbadala.
  9. Jaribu katika hali salama. Fanya mazoezi kwa makosa halisi na visa vya pembezoni, ikijumuisha vile vinavyopaswa kukataliwa. Jumuisha uendeshaji otomatiki katika siku za mchezo.
  10. Miliki na pitia. Taja mmiliki, weka msimbo katika udhibiti wa matoleo pamoja na mapitio, sajili kila uendeshaji otomatiki, na upitie kila robo mwaka upi wa kuhifadhi, kubadilisha, au kustaafisha.

Maswali ya kujadili na timu yako

Ni tahadhari zipi tunazirekebisha kwa njia ileile kila mara, na kila moja inachukua muda gani? Tumia data ya matukio ya hitilafu na tahadhari. Tarajia chache zinazochukua miito mingi. Ili kwenda mbali zaidi, chagua moja na ukague kwamba kitabu chake cha uendeshaji ni sahihi.

Nini kinaweza kwenda vibaya suluhisho hili likiendeshwa wakati halikupaswa? Fikiria kichocheo kisicho sahihi au lengo lisilo sahihi. Tarajia visa vichache visivyofurahisha. Ili kwenda mbali zaidi, ongeza ukaguzi au kikomo kwa kila kimoja.

Tungejuaje uendeshaji otomatiki ulikuwa unaficha tatizo linalokua? Uliza tungeona nini. Tarajia "hakuna". Ili kwenda mbali zaidi, kubaliana kuhesabu kuwaka na kuweka kizingiti cha kuibua tatizo.

Uharibifu wa juu zaidi ambao uendeshaji mmoja unaweza kufanya ni upi, na tungeusimamishaje? Taja upeo. Tarajia kutokuwa na uhakika. Ili kwenda mbali zaidi, weka kikomo na ufanyie mazoezi kusimamisha.

Tulifanya kazi hii kwa mikono lini mara ya mwisho, na kila mtu wa zamu bado angeweza? Omba mara ya mwisho. Tarajia ilikuwa zamani. Ili kwenda mbali zaidi, panga mazoezi.

AI inaweza kupendekeza au kuchagua urekebishaji wapi, na nini bado kinapaswa kuidhinishwa na mtu? AI inaweza kulinganisha dalili na vitabu vya uendeshaji na kupendekeza vitendo. Uliza ni vitendo gani vinahitaji idhini na nani anaamua. Ili kwenda mbali zaidi, chagua jaribio ambapo AI inapendekeza na mtu anaidhinisha, kukiwa na vipimo vya mara ngapi pendekezo lilikuwa sahihi.

Kwa vitendo: mfano wa usimamizi wa huduma

Timu ya taarifa za abiria ya reli ya taifa inaendesha maonyesho katika vituo 400, yanayolishwa na huduma ya data. Takriban mara mbili kwa wiki, kichakataji cha malisho kinakwama na maonyesho yanaganda kwenye nyakati za zamani. Mhandisi wa zamu anaitwa, anaingia, anakagua kwamba mchakato umekwama, anauanzisha upya, na kuthibitisha masasisho. Inachukua takriban dakika 20, mara nyingi usiku.

Timu inaandika kitabu cha uendeshaji, ikikiboresha baada ya kukijaribu kwenye matukio mawili ya hitilafu: thibitisha tahadhari, kagua kwamba hakuna upelekaji unaoendelea, kagua kwamba mchakato haujaandika kwenye kumbukumbu yake kwa dakika tano, anzisha upya, subiri dakika mbili, kagua kwamba muhuri wa wakati wa matokeo ni wa sasa, na uandike tukio. Wanakigeuza kuwa hati yenye hali ya dry-run, na mhandisi anaianzisha kwa amri moja ya soga kwa mwezi. Inafaulu kila mara.

Kisha wanaiunganisha na tahadhari katika hali ya pendekezo: tahadhari inachapisha matokeo ya hati na kitufe kinachomwomba mhandisi wa zamu kuidhinisha. Baada ya mwezi, kila idhini ilikuwa sahihi, ikichukua chini ya dakika mbili. Timu inakubali kuiacha iendeshwe kiotomatiki chini ya masharti makali: tu ukaguzi ukipita, mara mbili kwa saa kwa kiwango cha juu, kamwe wakati wa upelekaji, na kwa wito kwa mtu ikiwa kuanzisha upya kwa pili hakurekebishi. Inarekodi kila uendeshaji na kuchapisha kwenye kituo cha timu.

Uendeshaji otomatiki unawaka mara 19 katika miezi miwili ya kwanza. Mapitio yanaonyesha kukwama kunatokea mara nyingi zaidi baada ya sasisho la usiku wa manane la muuzaji fulani wa data, ambalo timu haikuliona walipokuwa wakishughulikia kila wito peke yao. Wanaibua tatizo na muuzaji. Katika uendeshaji mmoja, kikata mzunguko kinaanzisha baada ya kuanzisha upya kulikoshindwa mara mbili na kumwita mhandisi, anayegundua diski imejaa, sababu ambayo kitabu cha uendeshaji hakikuifunika.

Kinachobadilika: wahandisi wanalala kupitia matukio mengi haya, na maonyesho yanapona chini ya dakika tatu. Kinachobaki kigumu: muuzaji hajarekebisha muundo wa data; timu imegundua kwamba wahandisi wapya hawajawahi kufanya utaratibu wa mikono na ina wasiwasi kuhusu ujuzi wao; na hatua ya ziada ya kukagua diski iliongezwa baada ya mshangao tu. Kiongozi anapanga mazoezi ya mikono ya kila robo mwaka na kuongeza ukaguzi wa diski kwenye hati.

Mitazamo minne

Timu za bidhaa na utoaji

Jenga huduma zinazorahisisha urekebishaji: pointi za afya, kuanzisha upya salama, operesheni zisizoathiriwa na marudio, na kumbukumbu wazi. Andika vitabu vya uendeshaji pamoja na msimbo, na urekebishe sababu ambazo uendeshaji otomatiki unafichua.

Timu za huduma na uendeshaji

Miliki vitabu vya uendeshaji na uendeshaji otomatiki: andika, jaribu, weka vikomo, rekodi, na upitie. Weka ujuzi wa mikono hai, na uchukulie kuwaka mara kwa mara kama tatizo la kurekebisha.

Uongozi na utawala

Unga mkono kupanda ngazi kwa ushahidi, na uombe viwango vya kuwaka na ukaguzi wa matatizo yaliyofichwa. Fadhili muda wa kurekebisha sababu. Jihadhari na madai ya mifumo inayojiponya.

Wateja na watumiaji

Unapaswa kuona kupona haraka na kuzimika kunakoonekana kidogo. Ikiwa suluhisho la kiotomatiki halikufanya kazi au lilisababisha tatizo, mwambie mtoaji ili kanuni irekebishwe.

Uchapuchapu, AI, uendeshaji otomatiki na uchanganuzi

Uchapuchapu

Boresha urekebishaji baada ya kila tukio la hitilafu: boresha kitabu cha uendeshaji, ongeza ukaguzi, au chukua hatua moja juu ya ngazi. Weka mabadiliko madogo na yaliyopitiwa. Tahadhari: usiendeshe kiotomatiki kwa wingi baada ya usiku mbaya; chukua suluhisho moja kwa wakati na majaribio.

AI

AI inaweza kulinganisha tahadhari na vitabu vya uendeshaji, kupendekeza hatua, na kuandaa vitabu vipya vya uendeshaji kutoka kwa madokezo ya matukio ya hitilafu, huku idhini ikihitajika kwa chochote kinachotenda. Taja mmiliki na upime usahihi wa mapendekezo. Tahadhari: AI inayochagua kitendo kutoka kwa tahadhari isiyo ya kawaida inaweza kuchagua vibaya; ipunguze kwa orodha ya vitendo vilivyoidhinishwa. Tazama mada 5.5 — AI ya kiwakala na usimamizi wa binadamu.

Uendeshaji otomatiki

Mada hii ni lenzi ya uendeshaji otomatiki katika uendeshaji: masharti ya usalama, vikomo, vikata mzunguko, kutoathiriwa na marudio, kumbukumbu, na mapitio. Tahadhari: urekebishaji wa kiotomatiki unaweza kuficha matatizo na kuyafanya kuwa mabaya zaidi; hesabu kuwaka, weka kikomo cha uendeshaji, na upandishe kushindwa. Tazama mada 6.1 — Mkakati wa uendeshaji otomatiki.

Uchanganuzi

Fuatilia kiwango cha kuwaka kwa kila uendeshaji otomatiki, kiwango cha mafanikio, muda wa kupona, idadi ya miito iliyoepukwa, mara vikata mzunguko vilipoanzishwa, na matatizo yaliyoibuliwa kutoka kwa mifumo. Tahadhari: miito iliyoepukwa ni rahisi kutia chumvi na inaweza kuficha viwango vya kuwaka vinavyopanda; fuatilia vyote viwili pamoja. Tazama mada 7.4 — Uwezo wa kuchunguza na telemetria na kitabu cha Service Management Metrics.

Njia za kawaida za kushindwa

  • Kuendesha kiotomatiki kitabu cha uendeshaji kisichojaribiwa. Suluhisho si sahihi kwa kasi. Jaribu kwa mikono kwanza.
  • Hakuna vikomo. Mzunguko au kuwaka kimakosa kunajirudia. Weka kikomo kwa uendeshaji na utumie kikata mzunguko.
  • Matatizo yaliyofichwa. Kuanzisha upya kunaficha sababu. Hesabu kuwaka na urekebishe sababu.
  • Hakuna ukaguzi kabla ya kutenda. Kitendo kinagonga mfumo wenye afya au wenye shughuli. Thibitisha masharti.
  • Uendeshaji otomatiki wa kimya. Hakuna anayejua ulichofanya. Rekodi na uarifu.
  • Ujuzi unafifia. Hakuna anayeweza kufanya kwa mikono. Fanya mazoezi.
  • Zana zenye mamlaka kupita kiasi. Mwingilio mmoja unafika kila mahali. Tumia utambulisho finyu.

Modeli ya ukomavu

Kipimo Kuanzisha Kuendeleza Kusanifisha Kusimamia Kuratibu
Vitabu vya uendeshaji Vichwani au barua pepe Vimeandikwa kwa tahadhari kuu Vitabu vya uendeshaji vilivyojaribiwa vilivyounganishwa na tahadhari Ubora wa kitabu cha uendeshaji unapitiwa baada ya matukio ya hitilafu Vitabu vya uendeshaji vinatunzwa kama msimbo kati ya huduma
Uendeshaji otomatiki Hakuna Hati zinazoanzishwa na watu Vitendo vilivyoidhinishwa, vilivyojaribiwa vyenye mapendekezo Vitendo teule vinaendeshwa kiotomatiki kwa vikomo Vitendo salama vinachaguliwa kwa hatari kwa udhibiti wa binadamu
Usalama Hakuna Kumbukumbu za msingi Ukaguzi, vikomo, vikata mzunguko, na kurudisha nyuma Usalama unajaribiwa na kukaguliwa Usalama umejengwa ndani ya majukwaa ya pamoja
Kujifunza Kuzima moto Mapitio ya mara moja moja Viwango vya kuwaka vinafuatiliwa na sababu zinaibuliwa kama matatizo Kujirudia kunapimwa na kupunguzwa Kujifunza kunashirikiwa kati ya timu na wasambazaji

Orodha hakiki

  • Kitabu cha uendeshaji kiliandikwa, kikajaribiwa, na kutumiwa kwa mikono kabla ya uendeshaji otomatiki.
  • Kila uendeshaji otomatiki una kichocheo, masharti ya awali, uthibitisho, na njia ya kupandisha.
  • Vitendo haviathiriwi na marudio na vinaweza kubatilishwa.
  • Vikomo na kikata mzunguko vinaweka kikomo kwa marudio na upeo.
  • Kila uendeshaji umerekodiwa na timu inayomiliki inaarifiwa.
  • Tunafuatilia mara ngapi kila uendeshaji otomatiki unawaka na kuibua matatizo kutoka kwa mifumo.
  • Uendeshaji otomatiki uko katika udhibiti wa matoleo, umepitiwa, na umesajiliwa pamoja na wamiliki.
  • Tunafanyia mazoezi uendeshaji wa mikono na kujaribu uendeshaji otomatiki kwa makosa halisi.

Maelekezo ya AI

Geuza madokezo ya matukio ya hitilafu kuwa rasimu ya kitabu cha uendeshaji.

Here are notes from three incidents that had the same fix: [paste, personal data removed].
Draft a runbook with: trigger, preconditions to check, numbered steps with expected results, verification, rollback, and escalation. Use only what the notes say; write [missing] for anything not stated.
List what you are unsure of.

Tafuta mapengo ya usalama katika uendeshaji otomatiki.

Here is a description of an auto-remediation: trigger, checks, action, and limits: [paste].
List which of these are missing or unclear: precondition checks, post-action verification, rate limit, circuit breaker, idempotence, rollback, logging, notification, owner. Quote the text for each you consider present. Do not assume any.
List what you are unsure of.

Pitia data ya kuwaka.

Here is a log of when each automation fired in the last month, with result: [paste].
Count firings per automation, list those that are rising or clustered at the same time of day, and list questions to find causes. Do not guess causes.
List what you are unsure of.

Ujuzi wa AI

  • runbook: tumia kuandika na kujaribu utaratibu kabla ya kuuendesha kiotomatiki.
  • chaos-testing: tumia kujaribu urekebishaji dhidi ya makosa halisi.
  • root-cause-analysis: tumia kupata sababu ambazo uendeshaji otomatiki unaficha.
  • on-call-rotation: tumia kubuni mipangilio endelevu ya zamu za kuitwa.
  • incident-response-plan: tumia kufafanua majukumu na kupandisha kuzunguka uendeshaji otomatiki.

Vyanzo vikuu

  • Betsy Beyer and others (eds.), Site Reliability Engineering (2016), chapters on eliminating toil and on automation, free at sre.google.
  • Lisanne Bainbridge, "Ironies of Automation" (Automatica, 1983): kwa nini uendeshaji otomatiki hubadilisha jukumu la binadamu kwa njia za kushangaza.
  • Wikipedia, "Runbook" and "Autonomic computing": muhtasari wa hati na lengo.
  • Wikipedia, "Circuit breaker design pattern": mfumo wa kusimamisha kushindwa kunakorudiwa.

Marejeo

  1. Runbook — Wikipedia — https://en.wikipedia.org/wiki/Runbook
  2. Autonomic computing — Wikipedia — https://en.wikipedia.org/wiki/Autonomic_computing
  3. Circuit breaker design pattern — Wikipedia — https://en.wikipedia.org/wiki/Circuit_breaker_design_pattern
  4. Watchdog timer — Wikipedia — https://en.wikipedia.org/wiki/Watchdog_timer
  5. Idempotence — Wikipedia — https://en.wikipedia.org/wiki/Idempotence
  6. Rate limiting — Wikipedia — https://en.wikipedia.org/wiki/Rate_limiting
  7. Failover — Wikipedia — https://en.wikipedia.org/wiki/Failover
  8. Autoscaling — Wikipedia — https://en.wikipedia.org/wiki/Autoscaling
  9. Chaos engineering — Wikipedia — https://en.wikipedia.org/wiki/Chaos_engineering
  10. Hysteresis — Wikipedia — https://en.wikipedia.org/wiki/Hysteresis
  11. Dry run (testing) — Wikipedia — https://en.wikipedia.org/wiki/Dry_run_(testing)
  12. Site Reliability Engineering: How Google Runs Production Systems — Google — https://sre.google/sre-book/table-of-contents/