배포 실패 시 자동 rollback과 수동 승인은 어디까지 나눠야 할까?

무엇을 해결하나

health check 실패에 즉시 되돌릴 조건과 데이터 변경처럼 사람이 판단해야 할 조건을 구분해 배포 안전장치를 설계할 때 사용합니다.

준비할 정보

• 실제 적용할 환경과 대상 범위를 먼저 적습니다.
• 현재 상태와 기대 결과를 숫자나 예시로 준비합니다.
• 운영 데이터, 개인정보, secret은 제거하거나 안전한 placeholder로 바꿉니다.
• 변경 작업이라면 승인자, backup, rollback 가능 여부를 확인합니다.

복사해서 쓰는 프롬프트

배포 rollback 정책을 설계해줘.
배포 방식: {{DEPLOYMENT_MODEL}}
health·SLO 지표: {{HEALTH_SIGNALS}}
DB·queue 변경: {{STATE_CHANGES}}
트래픽 전환: {{TRAFFIC}}
담당자·응답 시간: {{ON_CALL}}

자동 중단, 자동 rollback, 수동 승인 조건과 timeout, 증빙, roll-forward 선택지를 제안해줘.

실행 순서

1. placeholder를 실제 환경 정보로 바꾸되 secret 값은 입력하지 않습니다.
2. 먼저 조회와 미리보기로 대상 범위, 권한, 현재 상태를 확인합니다.
3. 결과가 예상과 맞을 때만 가장 작은 단위로 실행하거나 초안을 생성합니다.
4. 변경 전후의 수치와 화면을 같은 조건에서 비교해 기록합니다.
5. 이상이 있으면 작업을 넓히지 말고 중단 조건과 rollback 절차를 따릅니다.

결과 확인

dev와 staging에서 의도적으로 health check를 실패시켜 자동화가 원하는 revision으로 돌아가는지 시험하고 알림과 audit log를 확인합니다.

검수 결과에는 확인한 사실, 아직 확인하지 못한 가정, 다음 행동을 분리해서 남깁니다. 다른 사람이 같은 입력으로 재현할 수 있도록 환경과 확인 시각도 함께 기록하면 좋습니다.

주의사항

오류율 하나만으로 rollback하면 일시적 외부 장애에 흔들릴 수 있습니다. backward incompatible DB migration은 application rollback만으로 복구되지 않으므로 별도 계획이 필요합니다.

AI가 만든 설명과 명령은 초안입니다. 실제 제품 버전과 조직 정책, 공식 문서를 대조하고 영향이 있는 작업은 dev나 격리 환경에서 먼저 검증하세요.

판단 기준

이 질문에는 모든 상황에 맞는 한 가지 답이 없습니다. 독자의 목적, 운영 위험, 팀의 검수 역량, 변경을 되돌릴 수 있는지를 기준으로 선택합니다. 먼저 작은 범위에서 두 선택지를 비교하고 결과를 기록한 뒤 적용 범위를 넓히세요.