메시지 queue backlog가 늘어날 때 확인하는 운영 체크리스트

무엇을 해결하나

producer 유입량, consumer 처리량, 지연·재시도·dead letter, downstream 병목을 구분해 backlog 증가 원인을 찾을 때 사용합니다.

준비할 정보

• 실제 적용할 환경과 대상 범위를 먼저 적습니다.
• 현재 상태와 기대 결과를 숫자나 예시로 준비합니다.
• 운영 데이터, 개인정보, secret은 제거하거나 안전한 placeholder로 바꿉니다.
• 변경 작업이라면 승인자, backup, rollback 가능 여부를 확인합니다.

복사해서 쓰는 프롬프트

queue 장애를 read-only로 진단해줘.
제품·queue/topic: {{QUEUE}}
backlog·oldest age 추이: {{METRICS}}
producer/consumer rate: {{RATES}}
재시도·DLQ: {{RETRIES_DLQ}}
최근 배포와 downstream: {{CHANGES_DEPENDENCIES}}

데이터 손실 없이 완화할 선택지와 승인 조건도 제시해줘.

실행 순서

1. placeholder를 실제 환경 정보로 바꾸되 secret 값은 입력하지 않습니다.
2. 먼저 조회와 미리보기로 대상 범위, 권한, 현재 상태를 확인합니다.
3. 결과가 예상과 맞을 때만 가장 작은 단위로 실행하거나 초안을 생성합니다.
4. 변경 전후의 수치와 화면을 같은 조건에서 비교해 기록합니다.
5. 이상이 있으면 작업을 넓히지 말고 중단 조건과 rollback 절차를 따릅니다.

결과 확인

message 수뿐 아니라 oldest age와 처리 성공률을 보고 partition·consumer group별 편차를 확인합니다. scale 전 downstream capacity와 idempotency를 검증합니다.

검수 결과에는 확인한 사실, 아직 확인하지 못한 가정, 다음 행동을 분리해서 남깁니다. 다른 사람이 같은 입력으로 재현할 수 있도록 환경과 확인 시각도 함께 기록하면 좋습니다.

주의사항

검사하려고 message payload의 개인정보를 출력하지 않습니다. 원인을 모른 채 queue를 purge하거나 consumer 수를 급증시켜 DB와 외부 API를 압도하지 않습니다.

AI가 만든 설명과 명령은 초안입니다. 실제 제품 버전과 조직 정책, 공식 문서를 대조하고 영향이 있는 작업은 dev나 격리 환경에서 먼저 검증하세요.