변경 실현
변경 실현은 서비스에 대한 변경이 안전하고 빠르게 이루어지도록 합니다. 위험을 평가하고, 변경에 가장 가까운 사람들에게 권한을 배정하고, 일상적인 점검을 파이프라인으로 옮기며, 판단이 필요한 변경에만 사람의 검토를 남겨 둡니다.
왜 중요한가
변경은 인시던트를 일으킵니다. 구성 편집, 코드 릴리스, 인증서 갱신, 방화벽 규칙 중 어느 것이든 서비스를 멈추게 할 수 있습니다. 대부분의 조직은 이를 어렵게 배우고 통제로 대응합니다. 양식, 승인, 회의, 동결입니다. 통제는 일부 위험을 줄이고 지연을 더하며, 지연은 사람들이 변경을 더 큰 배치로 묶게 하는데, 이것이 더 위험합니다.
통제의 전통적 형태는 제안된 변경을 검토하는 그룹인 변경 자문 위원회(CAB)입니다. 위원회는 위험한 변경에 폭넓은 시각을 가져올 때 실질적인 가치를 더할 수 있습니다. 하지만 모든 변경, 즉 천 번 성공한 일상적인 변경까지 검토할 때는 병목이 되기도 합니다. 니콜 폴스그렌, 제즈 험블, 진 킴의 책 Accelerate에 보고된 소프트웨어 전달 연구는 무거운 외부 승인이 더 나은 안정성과 연관되지 않았고 더 느린 전달과 연관되었으며, 동료 검토와 자동화된 점검이 더 나은 결과와 연관되었음을 발견했습니다. 데이터는 설문에서 나왔고 자체의 한계가 있지만, 방향은 많은 팀의 경험과 일관됩니다.
ITIL 4는 이 프랙티스의 이름을 "변경 실현(change enablement)"으로 바꾸었습니다. 위험이 적절히 평가되도록 보장하고, 변경이 진행되도록 승인하고, 변경 일정을 관리함으로써 이로운 변경을 가능하게 하는 것이 목표임을 알리기 위해서입니다. 이 주제는 서로 다른 종류의 변경에 서로 다른 경로를 두고 일에 증거를 내장하는 방법을 보여 줍니다. 지속적 전달(주제 2.2 — 지속적 전달)을 토대로 하며 릴리스 관리(주제 3.5 — 릴리스와 배포 관리)와 구성 관리(주제 4.4 — 구성 관리)에 연결됩니다.
핵심 개념
변경. ITIL 4에서는 서비스에 직접적 또는 간접적 영향을 줄 수 있는 모든 것의 추가, 수정, 제거입니다. 범위가 넓습니다. 소프트웨어, 인프라, 구성, 문서, 공급자, 프로세스입니다. Wikipedia의 변경 관리와 변경 통제 문서가 IT와 엔지니어링에서의 개념을 설명합니다.
변경 실현과 변경 관리. "변경 관리"는 조직 변화, 즉 전환의 인간적 측면(주제 8.3 — 조직 변화와 도입 참조)에도 쓰입니다. ITIL의 "변경 실현"은 서비스와 제품에 대한 변경의 통제를 가리킵니다. 이 가이드는 여기서 설명하는 프랙티스에 ITIL 4의 용어를 씁니다.
변경의 유형. ITIL 4는 세 가지를 설명합니다.
| 유형 | 설명 | 일반적인 경로 |
|---|---|---|
| 표준 | 위험이 낮고, 잘 이해되며, 사전 승인되고, 반복된다 | 문서화된 절차를 따른다. 개별 승인이 없다 |
| 일반 | 평가와 승인이 필요하다 | 알맞은 변경 승인권자가 평가하고 승인한다 |
| 긴급 | 서비스 복구나 치명적 취약점 수정처럼 긴급하게 해야 한다 | 신속한 승인과 사후 검토 |
변경 승인권자. 변경을 승인하는 사람 또는 그룹입니다. ITIL 4는 권한이 위험에 맞는 수준에 배정되어야 하며, 위험이 낮은 변경에서는 흔히 동료나 팀 자체라고 강조합니다. 위험이 더 높은 변경은 더 위로 갑니다. Wikipedia의 변경 자문 위원회 문서가 전통적인 모델을 설명합니다.
위험 평가. 변경이 실패할 가능성과 영향을 추정하는 것입니다. 요인에는 변경의 크기, 서비스의 중요도, 사용자 수, 수행된 테스트, 롤백 능력, 비슷한 변경의 실적이 있습니다. Wikipedia의 위험 평가와 위험 관리 문서가 일반적인 방법을 설명합니다. 아무도 신뢰하지 않는 정교한 점수보다 단순하고 일관된 점검표가 더 잘 작동합니다.
변경 일정. 계획된 변경을 보여 주는 달력으로, 충돌과 중요한 비즈니스 기간과의 겹침을 볼 수 있습니다. 하루에 여러 번 릴리스하는 팀에서는 일정이 동결 기간 같은 예외와 조율이 필요한 큰 변경으로 줄어듭니다.
동료 검토. 코드 리뷰처럼 변경이 이루어지기 전에 다른 유능한 사람이 검토하는 것입니다. Wikipedia가 동료 검토와 코드 리뷰를 설명합니다. 싸고, 빠르고, 관련된 지식을 가져오며, 필요한 곳에서 직무 분리를 뒷받침합니다.
파이프라인의 자동화된 통제. 테스트, 정적 분석, 보안 스캔, 정책 점검이 모든 변경에서 실행되고, 파이프라인은 무엇이 실행되었고 결과가 무엇인지 기록합니다. 일관되고 실제 변경에 묶여 있으므로 회의보다 더 나은 증거를 만들어 냅니다. Wikipedia의 테스트 자동화와 정적 프로그램 분석 문서가 일부 기법을 설명합니다. 주제 6.4 — 파이프라인과 자동화된 변경을 참조하세요.
직무 분리. 위험한 행동을 어느 한 사람이 혼자 완료할 수 없게 하는 통제입니다. 예를 들어 변경을 작성한 사람이 유일한 승인자가 되지 않도록 요구합니다. 규제나 감사가 이를 요구할 수 있습니다. Wikipedia가 직무 분리를 설명합니다. 파이프라인은 두 번째 검토자를 요구하고 둘 다 기록함으로써 이를 강제할 수 있습니다.
롤백과 복구. 변경을 되돌리거나 빠르게 롤포워드할 수 있는 능력은 위험을 줄입니다. 데이터 변경은 코드 변경보다 되돌리기 어렵습니다. Wikipedia의 데이터 관리에서의 롤백 문서를 참조하세요.
긴급 변경. 진정한 비상에는 속도가 필요합니다. 지정된 승인권자, 최소한의 서류, 사후 검토가 있는 정의된 경로는 "긴급"이 프로세스를 피하는 기본 방법이 되는 것을 막습니다.
증거와 감사. 미국의 사베인스-옥슬리법과 다른 관할 지역의 비슷한 규칙 같은 규제는 재무 시스템에 대한 변경 통제의 요구 사항을 이끌었습니다. 요구 사항은 관할 지역과 산업에 따라 다릅니다. 무엇이 적용되는지 확인하고 감사인에게 어떤 증거가 이를 충족하는지 물으세요. 이 가이드는 법률 자문을 제공하지 않습니다.
렌즈는 어떻게 맞물리는가. 변경 실현은 애자일의 속도가 통제를 만나는 곳입니다. 애자일 프랙티스는 작고 잦은 변경과 이해관계자의 이른 참여를 시사합니다. AI는 검토 아래 위험 평가와 변경 설명의 초안 작성을 도울 수 있습니다. 자동화는 파이프라인 통제를 제공합니다. 분석은 변경 실패와 리드 타임을 보여 줍니다.
모범 사례
- 변경을 유형과 위험으로 분류합니다. 표준, 일반, 긴급 변경을 각각의 예와 함께 정의하세요. 분류를 정기적으로 검토하고, 증거가 뒷받침하면 변경을 "표준"으로 옮기세요.
- 표준 변경을 사전 승인합니다. 반복되고 위험이 낮은 변경은 위험 오너와 절차에 한 번 합의하고, 팀이 개별 승인 없이 수행하게 하세요. 성공률을 검토하세요.
- 권한을 일 가까이에 둡니다. 동료 검토가 위험이 낮은 변경을 승인하게 하세요. 위험이 더 높은 변경은 서비스와 그 의존 관계를 이해하는 사람들에게 에스컬레이션하세요.
- 필요한 변경에 위원회를 씁니다. 위험이 높거나 여러 영역에 걸친 변경을 위한 변경 자문 기능을 유지하세요. 자료를 미리 준비하고 빠르게 결정하세요.
- 통제를 파이프라인에 내장합니다. 도구에서 테스트, 스캔, 두 번째 검토자를 요구하고 증거를 자동으로 기록하세요. 감사인에게 스프레드시트가 아니라 파이프라인을 보여 주세요.
- 변경을 작게 만듭니다. 큰 변경을 따로 릴리스하고 확인할 수 있는 더 작은 단계로 나누세요. 더 작은 변경은 위험이 적고 되돌리기 쉽습니다.
- 되돌아갈 길을 계획합니다. 일반 변경마다 롤백이나 롤포워드 계획을 요구하고, 중요한 것은 리허설하세요.
- 눈에 보이는 일정을 유지합니다. 계획된 변경과 동결 기간을 팀이 볼 수 있는 곳에 보여 주고, 주요 행사와의 충돌을 강조하세요. 잦은 작은 변경에서는 조율이 필요한 것만 보여 주세요.
- 긴급을 정의하고 단속합니다. 기준과 경로를 쓰세요. 긴급 변경마다 사후 검토하고 왜 필요했는지, 일반 경로를 개선할 수 있는지 물으세요.
- 실패한 변경에서 배웁니다. 인시던트를 일으킨 변경을 검토하고 위험 규칙, 테스트, 점검표를 조정하세요. 변경 실패율을 추적하고 원인을 살피세요.
팀과 논의할 질문
변경을 거부하거나 바꾼 적이 한 번도 없는 승인은 무엇이며, 시간으로 얼마나 비용이 듭니까? 이 질문은 통제가 가치를 더하는지 시험합니다. 지난 6개월의 데이터를 요청하세요. 기록된 효과가 없는 승인 단계를 발견할 수 있습니다. 더 깊이 들어가려면, 각각이 어떤 위험을 다루는지, 다른 통제가 그것을 다룰 수 있는지 물으세요.
우리가 가장 자주 하는 변경은 무엇이며, 그중 표준 변경으로 사전 승인할 수 있는 것은 무엇입니까? 건수 기준 상위 열 가지를 나열하세요. 많은 것이 위험이 낮고 반복적일 것으로 예상됩니다. 위험 오너를 참여시키세요. 더 깊이 들어가려면, 시험할 둘을 고르고 성공 기준에 합의하세요.
어떤 변경에 사람의 검토가 필요한지 어떻게 결정하며, 누가 합니까? 기준은 흔히 암묵적입니다. 우리 맥락에서 변경을 "위험"하게 만드는 것이 무엇인지 물으세요. 더 깊이 들어가려면, 짧은 점검표의 초안을 쓰고 최근 변경에 시도해 보세요.
감사인은 변경이 테스트되고, 검토되고, 승인되었다는 증거로 무엇을 받아들입니까? 추측하지 말고 감사인에게 직접 물으세요. 누가, 무엇을, 언제를 보여 준다면 파이프라인의 기록이 받아들여질 수 있다는 답이 예상됩니다. 더 깊이 들어가려면, 파이프라인 기록의 표본에 합의하고 감사인이 검토하게 하세요.
변경이 마지막으로 잘못된 것은 언제이며, 우리 프로세스의 무엇이 그것을 허용했습니까? 이 질문은 프랙티스를 실제 실패에 연결합니다. 빠진 테스트, 빠진 롤백, 부실한 정보를 찾으세요. 사람을 탓하지 마세요. 더 깊이 들어가려면, 추가하거나 개선할 통제 하나를 합의하세요.
AI는 변경 위험을 평가하는 데 어디서 도울 수 있으며, 우리가 손으로 확인하고 싶은 것은 무엇입니까? AI는 변경 설명과 비슷한 과거 실패를 읽고 위험 요인을 제안할 수 있습니다. 놓치거나 지어낼 수도 있습니다. 누가 도구를 소유하고 제안을 어떻게 검증하는지 물으세요. 더 깊이 들어가려면, AI의 위험 평가를 과거 변경의 결과와 비교하세요.
실제 적용: 서비스 관리 사례
한 지역 보건 당국의 IT 부서는 약 20명이 참석하는 주간 변경 자문 위원회를 열어 모든 변경을 검토합니다. 엔지니어들은 승인을 최대 8일 기다린다고 하고, 위원회는 문제를 잡아낸다고 합니다. 당국의 환자 기록 시스템은 지난해 위원회를 피하려고 "긴급"으로 이루어진, 검토되지 않은 구성 변경 때문에 두 번의 인시던트가 있었습니다.
변경 관리자는 6개월 치 기록을 분석합니다. 640건의 변경이 검토되었고, 590건은 제출된 대로 승인되었고, 38건은 정보 부족으로 반려되었고, 12건은 실질적 이유로 수정되거나 거부되었습니다. 590건 중 41건이 인시던트를 일으켰는데, 거의 모두 긴급하게 이루어진 변경이었습니다. 관리자는 세 가지 경로를 제안합니다. 사용자를 그룹에 추가하거나 인증서를 갱신하는 것 같은 표준 변경은 문서화된 절차를 따르며 승인이 필요 없습니다. 위험이 낮게 분류된 시스템에 대한 일반 변경은 다른 팀의 동료가 검토하고 파이프라인이 점검합니다. 환자 기록 시스템에 대한 위험이 더 높은 변경은 일주일에 두 번 모이고 이것만 보는 더 작은 위원회로 갑니다.
임상 안전 책임자는 동료 검토가 이루어진다는 증거를 요청합니다. 관리자는 검토자 이름, 실행된 테스트, 결과와 함께 모든 변경을 나열한 파이프라인 보고서를 보여 줍니다. 책임자는 실패한 변경의 월간 검토와 함께 6개월 시범 운영에 동의합니다.
달라진 점은 대부분의 변경에서 승인 시간의 중앙값이 5일에서 1일 미만으로 줄었고, "긴급"의 사용이 급격히 줄었다는 것입니다. 여전히 어려운 점은 일부 레거시 시스템이 자동화된 테스트를 실행할 수 없어 그 변경은 여전히 수작업 점검이 필요하다는 것, 동료 검토가 엔지니어의 시간에 달려 있어 압박을 받는 팀은 피상적으로 검토한다는 것, 월간 검토에서 검토자가 관련 지식이 없었던 변경 둘이 발견되었다는 것입니다. 관리자는 검토자가 그 시스템에서 일해 본 사람이어야 한다는 규칙을 추가합니다.
네 가지 관점
제품 및 전달 팀
변경을 작게 만들고, 테스트를 추가하고, 롤백을 계획하세요. 변경 프랙티스와 함께 표준 변경과 파이프라인 증거를 정의하세요. 동료 검토를 서명이 아니라 실제 검토로 다루세요.
서비스 및 운영 팀
운영상의 위험을 평가하고, 일정을 유지하고, 의존 관계에 대해 아는 것을 공유하는 일을 도우세요. 실패한 변경을 팀과 검토하고, 긴급 변경은 드물고 살피게 유지하세요.
리더십과 거버넌스
위험에 따라 권한을 위임하고, 파이프라인에서 증거를 요구하고, 일상적인 변경에 회의를 요구하지 마세요. 동료 검토를 위한 시간을 지키세요. 긴급 변경 수를 검토하세요.
고객과 사용자
여러분에게 영향을 주는 변경에 대해 충분한 예고와 분명한 설명과 함께 들어야 합니다. 변경이 여러분에게 위험한 기간을 제공자에게 알리세요. 변경 후의 문제를 신속하게 보고하세요.
애자일, AI, 자동화, 분석
애자일
이해관계자에게 알리는 작고 잦은 변경이 크고 드문 변경보다 안전합니다. 변경 경로를 설계하는 데 운영과 위험 오너를 참여시키고 피드백으로 개선하세요. 주의: 민첩성의 이름으로 통제를 버리지 마세요. 더 나은 것으로 대체하세요.
AI
AI는 변경 설명의 초안을 쓰고, 비슷한 과거 변경에서 위험 요인을 제안하고, 설명에서 빠진 정보를 점검하는 일을 도울 수 있으며, 결정에는 사람이 책임집니다. 주의: AI의 위험 점수가 권위로 취급될 수 있으므로 제안으로 보여 주고 얼마나 자주 맞았는지 추적하세요. 주제 5.4 — 인시던트, 지식, 변경을 위한 생성형 AI를 참조하세요.
자동화
파이프라인 점검, 증거 포착, 일정 충돌 감지, 표준 변경 실행을 로그와 롤백과 함께 자동화하세요. 주의: 변경의 자동 승인은 그 규칙만큼만 좋으므로, 규칙을 검토하고 승인된 변경을 표본 추출하세요. 주제 6.4 — 파이프라인과 자동화된 변경을 참조하세요.
분석
유형별 변경 건수, 리드 타임, 변경 실패율, 긴급 변경을 추적하고 실패의 원인을 살피세요. 주의: 낮은 실패율은 실패를 기록하지 않는 데서 올 수 있고, 승인 건수는 변경을 쪼개거나 묶어서 조작될 수 있으므로 인시던트 데이터와 대조해 확인하세요. 서비스 관리 지표(Service Management Metrics) 책과 주제 7.3 — 측정과 보고를 참조하세요.
흔한 실패 유형
- 모든 변경을 똑같이 검토하기. 일상적인 변경이 기다립니다. 위험으로 분류하고 표준 변경을 사전 승인하세요.
- 증거 없는 위원회. 위원이 평가할 수 없는 것을 승인합니다. 정보를 준비하고 판단이 필요한 변경만 보내세요.
- 우회로로서의 긴급. 검토를 피하려고 긴급이 선언됩니다. 정의하고 사용마다 검토하세요.
- 피상적인 동료 검토. 읽지 않은 서명입니다. 자격 있는 검토자를 요구하고 검토를 표본 추출하세요.
- 대체 없이 통제를 버리기. 실패가 늘고 감사인이 반대합니다. 파이프라인에서 각 통제의 목적을 충족하세요.
- 롤백 계획 없음. 실패한 변경이 인시던트를 연장합니다. 복구를 요구하고 리허설하세요.
- 승인된 변경 수를 성공으로 세기. 양은 늘지만 품질은 늘지 않습니다. 실패와 일으킨 인시던트를 추적하세요.
성숙도 모델
| 영역 | 시작 | 발전 | 표준화 | 관리 | 오케스트레이션 |
|---|---|---|---|---|---|
| 변경 유형과 권한 | 모든 것에 하나의 경로 | 긴급 경로가 있다 | 위험에 따른 권한과 함께 표준, 일반, 긴급이 정의되어 있다 | 경로를 데이터로 검토한다 | 경로가 서비스 전반에서 위험에 따라 자동으로 적응한다 |
| 증거 | 양식과 회의 | 도구의 일부 기록 | 대부분의 변경에 파이프라인 기록이 있다 | 증거를 표본 추출하고 감사한다 | 도구와 공급자 전반에 증거가 지속적이다 |
| 위험 평가 | 직관 | 비공식 점검표 | 일관된 점검표와 기준 | 실패 데이터로 기준을 조정한다 | 사람의 검토와 함께 데이터와 자동화로 위험을 평가한다 |
| 학습 | 비난 | 가끔의 검토 | 조치와 함께 실패한 변경을 검토한다 | 실패 원인을 추적하고 줄인다 | 학습을 팀 전반에 공유한다 |
체크리스트
- 예시와 함께 표준, 일반, 긴급 변경 유형이 있다.
- 표준 변경은 문서화된 절차로 사전 승인되어 있다.
- 각 유형의 권한이 위험에 맞다.
- 동료 검토를 관련 지식이 있는 사람이 한다.
- 파이프라인 통제가 테스트, 검토자, 결과를 기록한다.
- 모든 일반 변경에 롤백이나 롤포워드 계획이 있다.
- 긴급 변경은 사후에 검토한다.
- 변경 실패율을 추적하고 실패한 변경에서 배운다.
AI 프롬프트
변경 설명의 빠진 부분을 점검합니다.
Here is a draft change description: [paste]. Our required fields are: [list].
List which required fields are missing or unclear, and list five questions a reviewer would ask. Do not rewrite the change or rate its risk.
List what you are unsure of.
실패한 변경의 패턴을 찾습니다.
Below is a list of changes that caused incidents, with dates, type, size, whether tested, and whether rolled back: [paste list, names removed].
List common features across them and questions to investigate. Do not infer causes beyond the data.
List what you are unsure of.
표준 변경의 후보를 제안합니다.
Here are our most frequent changes in the last six months, with counts and failure counts: [paste data].
List which look like candidates for pre-authorization, with the data you used and the questions we should ask the risk owner. Do not claim any is safe.
List what you are unsure of.
AI 스킬
- change-request: 분명하고 가벼운 변경 기록을 설계할 때 사용합니다.
- enterprise-change-management: 변화의 조직적 측면에 사용합니다.
- risk-register: 변경에서 오는 위험을 기록하고 검토할 때 사용합니다.
- compliance-testing: 통제 요구 사항에 비추어 증거를 점검할 때 사용합니다.
- security-testing: 파이프라인의 보안 점검을 계획할 때 사용합니다.
주요 출처
- Nicole Forsgren, Jez Humble, and Gene Kim, Accelerate (2018): 변경 승인을 포함한 전달 프랙티스에 대한 연구.
- DORA (dora.dev): 소프트웨어 전달 성과에 대한 지속적인 연구와 보고서.
- PeopleCert, ITIL certification pages: 변경 실현 프랙티스에 대한 소유자의 설명.
- Wikipedia, "Change management" and "Change control": 생각의 개관.
참고 문헌
- Change management — Wikipedia — https://en.wikipedia.org/wiki/Change_management
- Change control — Wikipedia — https://en.wikipedia.org/wiki/Change_control
- Change-advisory board — Wikipedia — https://en.wikipedia.org/wiki/Change-advisory_board
- Risk assessment — Wikipedia — https://en.wikipedia.org/wiki/Risk_assessment
- Peer review — Wikipedia — https://en.wikipedia.org/wiki/Peer_review
- Code review — Wikipedia — https://en.wikipedia.org/wiki/Code_review
- Separation of duties — Wikipedia — https://en.wikipedia.org/wiki/Separation_of_duties
- Test automation — Wikipedia — https://en.wikipedia.org/wiki/Test_automation
- Static program analysis — Wikipedia — https://en.wikipedia.org/wiki/Static_program_analysis
- Continuous delivery — Wikipedia — https://en.wikipedia.org/wiki/Continuous_delivery
- DORA research — DevOps Research and Assessment — https://dora.dev/research/