왜 중요한가

변경이 드물고 컸을 때, 통제는 회의를 뜻했습니다. 사람들이 모여 문서를 읽고 릴리스를 진행해도 된다고 합의했습니다. 변경이 잦고 작아지자 회의는 확장되지 않았습니다. 하루에 스무 번 릴리스하는 팀이 위원회를 스무 번 소집할 수는 없습니다. 하지만 같은 점검을 일관된 엄격함으로 스무 번 돌리고 매번 기록을 남길 수는 있습니다.

이것이 서비스 관리에 대한 파이프라인의 기여입니다. 변경을 빌드하고 배포하는 같은 자동화된 순서가 변경을 시험하고, 약점을 스캔하고, 정책에 대해 점검하고, 두 번째 검토자를 요구하고, 일어난 일을 적을 수도 있습니다. 결과는 흔히 회의가 제공한 것보다 나은 통제입니다. 일관되고, 실제 변경에 묶여 있고, 한참 뒤에도 감사인이 이용할 수 있습니다. Wikipedia는 지속적 전달과 시험 자동화를 이를 가능하게 하는 프랙티스로 설명합니다.

파이프라인은 또한 거버넌스해야 할 새로운 대상입니다. 운영 환경을 바꿀 수 있는 자격 증명을 보유하고, 점검을 건너뛰도록 잘못 구성될 수 있으며, 시험이 거의 없는 초록색 표시를 팀이 신뢰하게 만들 수 있습니다. 이 주제는 파이프라인을 통제로 설계하는 방법, 감사인을 위한 증거를 만드는 방법, 자동화가 대체할 수 없는 사람의 판단을 유지하는 방법을 설명합니다. 지속적 전달(주제 2.2 — 지속적 전달)과 변경 실현(주제 3.4 — 변경 실현) 위에 서 있으며, 코드형 인프라(주제 6.3 — 코드형 인프라와 GitOps) 및 릴리스 관리(주제 3.5 — 릴리스와 배포 관리)와 연결되고, 정보 보안(주제 3.13 — 정보 보안 관리)과 관심사를 공유합니다.

핵심 개념

파이프라인. 변경을 소스 코드에서 운영 환경으로 가져가는 자동화된 단계의 연속입니다. 빌드, 시험, 스캔, 패키징, 배포, 검증입니다. Wikipedia가 소프트웨어의 파이프라인을 설명합니다. 각 단계는 통과하거나 실패하고, 실패하면 변경이 멈춥니다. 파이프라인은 코드로 정의되어 버전 관리에 저장됩니다.

지속적 통합과 전달. 변경을 자주 병합하고 모든 빌드를 릴리스 가능한 상태로 유지하는 것으로, 주제 2.2 — 지속적 전달에서 설명합니다. 파이프라인은 둘의 기계 장치입니다. Wikipedia가 지속적 통합과 지속적 전달을 설명합니다.

통제로서의 단계. 각 단계는 목적이 있는 통제입니다.

단계 제공하는 통제
빌드 변경이 재현 가능하게 컴파일되고 패키징된다
단위 및 통합 시험 알려진 동작이 여전히 작동한다
정적 분석과 보안 스캔 흔한 결함과 취약한 의존성이 발견된다
정책 점검 태깅, 암호화, 승인된 리전 같은 규칙이 충족된다
동료 검토 두 번째 사람이 변경을 읽었다
단계적 배포와 검증 더 넓게 노출되기 전에 안전한 곳에서 변경이 작동한다

품질 관문. 시험 통과, 치명적 취약점 없음, 커버리지가 떨어지지 않음처럼 변경이 진행하려면 충족해야 하는 조건입니다. Wikipedia가 더 넓은 품질 관리를 설명합니다. 관문은 적고, 분명하고, 빨라야 합니다. 자주 무효화되거나 무시되는 관문은 팀에게 관문을 무시하라고 가르칩니다.

자동화된 시험. 단위 시험, 통합 시험, 종단 간 시험이 모든 변경에서 실행됩니다. Wikipedia가 시험 자동화, 단위 시험, 통합 시험을 설명합니다. 가치는 그것들을 얼마나 신뢰하느냐에 있습니다. 불안정한 시험은 신뢰를 갉아먹습니다. 주제 2.2 — 지속적 전달을 참조하세요.

보안 스캔. 정적 분석은 코드에서 약점의 패턴을 살피고, 소프트웨어 구성 분석은 사용하는 라이브러리의 알려진 취약점을 살핍니다. Wikipedia가 정적 애플리케이션 보안 시험과 소프트웨어 구성 분석을 둘 다 설명합니다. 발견 사항은 분류가 필요합니다. 많은 것이 위험이 낮거나 거짓이기 때문입니다.

코드형 정책. "어떤 스토리지 버킷도 공개되어서는 안 된다"처럼 기계가 점검할 수 있는 코드로 써서 파이프라인에서 적용하는 규칙입니다. 요구 사항을 시험 가능하게 하고 결과를 기록할 수 있게 합니다. 주제 6.3 — 코드형 인프라와 GitOps를 참조하세요.

직무 분리. 변경을 쓴 사람이 승인하는 유일한 사람이 아닙니다. Wikipedia가 직무 분리를 설명합니다. 파이프라인에서는 두 번째 검토자를 요구하고 작성자가 자신의 변경을 승인하지 못하게 해 이를 강제합니다. 규제가 요구하는 곳에서는 파이프라인이 누가 무엇을 했는지 보여 줄 수 있습니다.

파이프라인의 변경 유형. 일상적인 구성 갱신 같은 표준 변경은 자동화된 점검만으로 수동 승인 없이 통과할 수 있습니다. 위험이 더 높은 일반 변경은 파이프라인에 사람의 승인 단계를 더할 수 있습니다. 긴급 변경은 같은 파이프라인을 같은 기록과 함께 빠른 모드로 씁니다. 주제 3.4 — 변경 실현을 참조하세요.

증거. 파이프라인은 무엇이 바뀌었는지(커밋), 누가 검토했는지, 어떤 점검이 돌았고 결과가 어땠는지, 누가 또는 무엇이 배포했는지, 언제인지를 기록합니다. Wikipedia가 감사 추적을 설명합니다. 증거는 관련된 사람들이 바꿀 수 없는 곳에 저장하고, 변경별로 쉽게 가져올 수 있어야 합니다.

소프트웨어 공급망. 파이프라인은 다른 이들이 제공한 구성 요소로 빌드하고, 다른 이들의 도구를 쓰며, 배포되는 산출물을 만듭니다. Wikipedia가 소프트웨어 공급망과 산출물이 어디서 왔는지에 대한 검증 가능한 기록인 출처(provenance)라는 생각을 설명합니다. 프랙티스에는 버전 고정, 산출물 서명, 자재 명세서 유지가 있습니다. 주제 4.2 — 소프트웨어 자산 관리를 참조하세요.

점진적 롤아웃과 검증. 배포 뒤 파이프라인은 상태 지표를 점검하고 나빠지면 자동으로 롤백할 수 있습니다. 단계적 롤아웃과 기능 플래그 같은 기법은 주제 3.5 — 릴리스와 배포 관리에서 설명합니다.

파이프라인 보안. 파이프라인은 운영 환경에 배포할 수 있으므로 가치가 높은 표적입니다. 보호하세요. 누가 파이프라인 정의를 바꿀 수 있는지 제한하고, 짧은 수명의 자격 증명을 쓰고, 빌드 환경을 격리하고, 비정상 활동을 모니터링하세요. 파이프라인에 대한 변경을 운영 환경에 대한 변경만큼 신중하게 다루세요.

우회와 예외. 일부 변경은 맞지 않을 것입니다. 데이터 수정이나 수동 벤더 작업입니다. 사람들이 우회로를 찾게 두는 대신, 승인이 있는 기록되는 예외 경로를 정의하세요. 예외를 정기적으로 검토하세요.

제품으로서의 파이프라인. 파이프라인에는 오너, 백로그, 문서, 피드백을 주는 사용자가 필요합니다. 느리거나 불안정한 파이프라인은 사람들이 피하라고 가르칩니다.

렌즈는 어떻게 맞물리는가. 파이프라인은 애자일 렌즈와 자동화 렌즈가 거버넌스와 만나는 곳입니다. AI는 사람의 검토 아래 시험을 제안하고, 변경을 검토하고, 실패를 설명할 수 있습니다. 분석은 파이프라인 데이터로 전달과 변경의 품질을 보여 줍니다.

모범 사례

  1. 각 단계를 이름 붙은 통제로 설계합니다. 단계마다 어떤 위험을 다루는지, 누가 소유하는지, 실패가 무엇을 뜻하는지 적으세요. 실제 위험을 다루지 않는 단계는 제거하세요.
  2. 파이프라인을 빠르게 유지합니다. 흔한 경로에서 몇 분 안에 결과가 나오게 하세요. 느린 점검은 분명한 피드백과 함께 병렬이나 뒤쪽 단계에서 돌려 사람들이 지름길을 찾지 않게 하세요.
  3. 파이프라인을 유일한 경로로 만듭니다. 운영 변경은 파이프라인을 거치게 하고, 나머지에는 기록되는 예외 경로를 두세요. 가능한 곳에서 직접 접근을 막으세요.
  4. 도구에서 직무 분리를 강제합니다. 자격 있는 두 번째 검토자를 요구하고, 작성자가 자신의 변경을 승인하지 못하게 하고, 두 신원을 모두 기록하세요.
  5. 실패를 진지하게 다룹니다. 실패한 시험이나 스캔은 변경을 멈춥니다. 일상적인 무효화를 허용하지 말고, 필요할 때는 승인과 기록된 이유를 요구하세요.
  6. 보안 발견 사항을 분류합니다. 심각도와 노출에 따라 임계값을 정하고, 심각한 것을 고치고, 나머지는 추적하세요. 발견 사항이 읽히도록 규칙을 조정해 소음을 줄이세요.
  7. 증거를 자동으로 기록합니다. 커밋, 검토자, 점검, 결과, 산출물, 배포 세부 사항을 변경 작성자가 편집할 수 없는 저장소에 담으세요. 변경 기록과 연결하세요.
  8. 파이프라인 자체를 보호합니다. 누가 정의를 바꿀 수 있는지 제한하고, 최소 범위의 짧은 수명 자격 증명을 쓰고, 도구와 의존성을 고정하고, 산출물에 서명하세요.
  9. 배포 뒤에 검증합니다. 상태 지표를 점검하고, 나빠지면 롤백하거나 일시 중지하세요. 결과를 같은 기록에 보고하세요.
  10. 파이프라인을 정기적으로 검토합니다. 어떤 점검이 실제 문제를 잡고, 어떤 것이 무시되고, 실행에 얼마나 걸리고, 어떤 예외가 생기는지 보세요. 개선하고 가지치기하세요.

팀과 논의할 질문

우리의 변경 통제 중 오늘 파이프라인이 제공하는 것은 무엇이며, 여전히 회의나 양식에 의존하는 것은 무엇입니까? 통제를 나열하세요. 자동화할 수 있는데 수동인 것이 있을 것으로 예상됩니다. 더 깊이 들어가려면, 파이프라인으로 옮길 것 하나를 고르세요.

감사인이 지난달 변경 하나의 증거를 요청한다면 무엇을 보게 됩니까? 해 보세요. 여러 시스템을 짜 맞춰야 할 것으로 예상됩니다. 더 깊이 들어가려면, 변경마다 하나의 기록과 그것을 가져오는 방법에 합의하세요.

사람들은 실패한 점검을 얼마나 자주 무효화하거나 우회하며, 그 이유는 무엇입니까? 데이터를 요청하세요. 누구의 말보다 많을 것으로 예상됩니다. 더 깊이 들어가려면, 가장 많이 무효화된 점검을 고치거나 제거하기 위해 살펴보세요.

누가 파이프라인 정의를 바꿀 수 있으며, 누가 그 변경을 검토합니까? 이는 파이프라인 보안을 시험합니다. 넓은 접근이 예상됩니다. 더 깊이 들어가려면, 접근을 제한하고 파이프라인 변경에 검토를 요구하세요.

스캐너의 발견 사항 중 우리가 읽는 것은 무엇이며 무시하는 것은 무엇입니까? 엔지니어에게 물으세요. "대부분 무시한다"가 예상됩니다. 더 깊이 들어가려면, 사람들이 실행할 발견 사항에 맞게 스캐너를 조정하세요.

파이프라인에서 AI가 도울 수 있는 곳은 어디이며, 무엇이 사람의 결정으로 남아야 합니까? AI는 시험을 제안하고, 실패를 요약하고, 코드를 검토할 수 있습니다. 위험과 예외의 승인은 사람이 남아야 합니다. 더 깊이 들어가려면, AI가 제안한 시험을 검토와 함께 시험해 보세요.

실제 적용: 서비스 관리 사례

한 국립 사회보장 기관은 약 80개의 애플리케이션을 운영합니다. 급여 계산 시스템의 변경에는 주간 검토 위원회와 긴 양식이 필요하며, 릴리스는 매달 이루어집니다. 감사 사무소는 위원회가 거의 모든 것을 승인하고 개별 변경의 증거가 흩어져 있음을 발견합니다. 기관의 엔지니어들은 파이프라인이 더 잘할 수 있다고 주장합니다.

전달 관리자는 애플리케이션 하나로 시범 사업을 합니다. 파이프라인이 애플리케이션을 빌드하고, 단위 및 통합 시험 1,800개와 과거 결함에서 가져온 회귀 시험 집합을 실행하고, 코드와 라이브러리를 스캔하고, 인프라 정의를 정책에 대해 점검하고, 그 시스템에서 일해 본 두 번째 엔지니어의 검토를 요구합니다. 모든 실행은 커밋, 검토자, 시험 결과, 스캔 결과, 산출물 식별자, 배포 세부 사항의 기록을 엔지니어가 편집할 수 없는 로그에 저장합니다.

변경 프로세스는 세 경로로 재설계됩니다. 텍스트 갱신과 사소한 구성 같은 일상적인 변경은 표준입니다. 파이프라인을 통과하면 위원회 없이 시범 그룹에, 이어서 모두에게 배포됩니다. 급여 계산 규칙의 변경은 일반이며, 쉬운 말 요약과 시험 결과를 보는 정책 분석가의 서명이 추가로 필요합니다. 긴급 수정은 단축된 시험 집합과 사후 검토와 함께 같은 파이프라인을 씁니다.

감사 사무소는 변경 30건의 표본을 검토해, 모두에서 증거가 완전하고 파이프라인이 점검 실패로 변경 네 건을 막았음을 발견합니다. 또한 엔지니어 둘이 서로의 변경을 반복해서 승인했음을 지적하고, 검토자가 순환하는 규칙을 요청합니다.

달라진 점은 릴리스가 매주가 되고, 위원회가 규칙 변경에 집중하며, 감사인이 어떤 변경의 증거든 몇 분 안에 가져올 수 있다는 것입니다. 여전히 어려운 점은 오래된 애플리케이션이 자동화된 시험을 돌릴 수 없어 변경이 옛 경로를 유지한다는 것, 스캐너가 위험이 낮은 라이브러리 문제를 많이 표시해 엔지니어가 보고서를 무시하기 시작했다는 것, 파이프라인 자체의 자격 증명이 필요 이상으로 넓은 접근을 가진 것으로 드러났다는 것입니다. 관리자는 스캐너 조정, 검토자 순환, 파이프라인 자격 증명 검토를 더합니다.

네 가지 관점

제품 및 전달 팀

서비스의 파이프라인을 소유하세요. 빠르고, 신뢰받고, 무엇을 점검하는지에 정직하게 유지하세요. 실제 결함을 잡는 시험을 쓰고, 불안정한 것을 고치고, 발견 사항을 작업으로 다루세요. 우회하지 마세요.

서비스 및 운영 팀

파이프라인이 배포 뒤에 쓰는 점검과 상태 지표를 정의하는 데 도움을 주세요. 인시던트와 리뷰에서 증거를 쓰세요. 진짜 비상 상황을 위한 예외 경로를 유지하세요.

리더십과 거버넌스

더 많은 회의가 아니라 파이프라인의 증거를 요청하세요. 시험, 스캔, 파이프라인 보안에 재원을 대세요. 무효화와 예외를 검토하세요. 초록색 파이프라인을 안전한 시스템으로 착각하지 마세요.

고객과 사용자

잦고 더 안전한 변경의 혜택을 봅니다. 여러분에게 영향을 주는 중대한 변경에 대한 알림을 받아야 하며, 릴리스 뒤의 문제를 신고할 수 있어야 합니다.

애자일, AI, 자동화, 분석

애자일

매번 같은 점검을 통과하는 작고 잦은 변경은 애자일 통제의 실용적인 형태입니다. 인시던트와 피드백으로 파이프라인을 개선하세요. 주의: 파이프라인을 완성된 것으로 여기지 마세요. 시스템이 바뀌면 시험의 공백이 커집니다.

AI

AI는 시험을 제안하고, 변경을 검토하고, 실패를 요약하고, 발견 사항을 분류할 수 있으며, 각 결정에는 책임지는 사람이 있습니다. 주의: AI가 생성한 시험은 거의 시험하지 않으면서 통과할 수 있고 AI 코드 검토는 보안 문제를 놓칠 수 있으므로, 빠져나간 결함을 측정하고 위험에 대해서는 사람의 검토를 유지하세요. 주제 5.4 — 인시던트, 지식, 변경을 위한 생성형 AI를 참조하세요.

자동화

파이프라인은 점검과 기록을 포함한 운영 환경으로 가는 경로의 자동화입니다. 자체 신원, 최소 권한, 모니터링을 갖춘 핵심 인프라로 보호하세요. 주의: 약한 규칙에 기반한 자동 승인은 거짓된 확신을 주므로, 각 규칙이 실제로 무엇을 점검하는지 검토하세요. 주제 6.1 — 자동화 전략을 참조하세요.

분석

리드 타임, 배포 빈도, 변경 실패율, 복구 시간, 무효화 횟수, 빠져나간 결함, 심각도별 발견 사항을 추적하세요. 주의: 전달 척도는 조작하기 쉬우며 팀의 순위를 매기는 데 쓰면 안 됩니다. 빠져나간 결함을 추적해 점검을 시험하세요. 서비스 관리 지표(Service Management Metrics) 책과 주제 7.3 — 측정과 보고를 참조하세요.

흔한 실패 유형

  • 초록색은 안전하다는 뜻. 시험이 빈약한데 통과합니다. 각 점검이 실제로 무엇을 시험하는지 검토하고 빠져나간 결함을 추적하세요.
  • 일상적인 무효화. 점검이 우회됩니다. 무효화를 드물고, 승인되고, 검토되게 하세요.
  • 느린 파이프라인. 사람들이 지름길을 찾습니다. 흔한 경로를 빠르게 유지하세요.
  • 스캐너 소음. 발견 사항이 무시됩니다. 조정하고 분류하세요.
  • 흩어진 증거. 감사에 몇 주가 걸립니다. 한곳에 자동으로 기록하세요.
  • 과도한 권한의 파이프라인. 한 번의 침해가 모든 것에 닿습니다. 접근을 제한하고 짧은 수명의 자격 증명을 쓰세요.
  • 자기 승인. 작성자가 자기 작업을 승인합니다. 도구에서 직무 분리를 강제하세요.

성숙도 모델

영역 시작 발전 표준화 관리 오케스트레이션
통제 수동 점검 빌드와 일부 시험 모든 변경에 시험, 스캔, 정책, 검토 점검의 효과를 측정한다 사람의 감독 아래 위험에 따라 통제가 자동으로 조정된다
증거 양식과 이메일 일부 로그 변경마다 자동 기록 증거를 감사하고 표본 추출한다 파이프라인과 공급자 전반에서 증거가 지속적이다
파이프라인 보안 공유 자격 증명 인식한다 최소 권한, 고정된 도구, 보호된 정의 파이프라인을 모니터링하고 시험한다 공급망을 끝에서 끝까지 검증한다
흐름 느리고 수동이다 더 빠른 빌드 예외 경로가 있는 빠른 흔한 경로 흐름과 실패를 측정한다 서비스 전반에서 전달이 최적화된다

체크리스트

  • 각 파이프라인 단계에 이름 붙은 목적과 오너가 있다.
  • 흔한 경로가 몇 분 안에 돈다.
  • 운영 변경은 기록되는 예외 경로와 함께 파이프라인을 거친다.
  • 직무 분리를 도구에서 강제한다.
  • 실패한 점검은 변경을 멈추게 하고, 무효화는 승인되고 검토된다.
  • 증거가 작성자가 편집할 수 없는 저장소에 자동으로 기록된다.
  • 파이프라인 정의와 자격 증명이 보호되고 검토된다.
  • 빠져나간 결함을 포함해 점검의 효과를 검토한다.

AI 프롬프트

통제를 파이프라인에 대응시킵니다.

Here is our list of change controls: [paste]. Here is a description of what our pipeline does: [paste].
For each control, say whether the pipeline description appears to provide it, partly provide it, or not mention it, quoting the words. Do not assume checks that are not described.
List what you are unsure of.

실패한 파이프라인 실행을 검토합니다.

Here is the log of a failed run: [paste, with secrets removed].
Summarize which stage failed, the error messages, and the three most likely areas to check, labeling each as a hypothesis. Do not suggest overriding the failure.
List what you are unsure of.

감사를 위한 증거 표본을 준비합니다.

Here are the records for [number] changes: [paste summary with commit, reviewers, checks, results].
For each, check whether it shows a reviewer who is not the author, passing tests, scan results, and deployment time, and list gaps. Do not infer anything not in the records.
List what you are unsure of.

AI 스킬

주요 출처

  • Jez Humble and David Farley, Continuous Delivery (2010): 배포 파이프라인에 대한 기초적인 설명.
  • Nicole Forsgren, Jez Humble, and Gene Kim, Accelerate (2018): 전달 프랙티스와 성과에 대한 연구.
  • DORA (dora.dev): 진행 중인 연구와 보고서.
  • Wikipedia, "Continuous delivery" and "Software supply chain": 프랙티스와 그 위험의 개관.

참고 문헌

  1. Continuous delivery — Wikipedia — https://en.wikipedia.org/wiki/Continuous_delivery
  2. Continuous integration — Wikipedia — https://en.wikipedia.org/wiki/Continuous_integration
  3. Test automation — Wikipedia — https://en.wikipedia.org/wiki/Test_automation
  4. Unit testing — Wikipedia — https://en.wikipedia.org/wiki/Unit_testing
  5. Integration testing — Wikipedia — https://en.wikipedia.org/wiki/Integration_testing
  6. Static application security testing — Wikipedia — https://en.wikipedia.org/wiki/Static_application_security_testing
  7. Software composition analysis — Wikipedia — https://en.wikipedia.org/wiki/Software_composition_analysis
  8. Software supply chain — Wikipedia — https://en.wikipedia.org/wiki/Software_supply_chain
  9. Separation of duties — Wikipedia — https://en.wikipedia.org/wiki/Separation_of_duties
  10. Audit trail — Wikipedia — https://en.wikipedia.org/wiki/Audit_trail
  11. Code signing — Wikipedia — https://en.wikipedia.org/wiki/Code_signing
  12. DORA research — DevOps Research and Assessment — https://dora.dev/research/