CI matrix 빌드는 모든 버전을 계속 테스트해야 할까?

무엇을 해결하나

지원 runtime과 OS 조합이 늘어나 CI 시간과 비용이 커질 때 필수 호환성, 빠른 PR 검증, 정기 전체 검증으로 matrix를 나눌 때 사용합니다.

준비할 정보

• 실제 적용할 환경과 대상 범위를 먼저 적습니다.
• 현재 상태와 기대 결과를 숫자나 예시로 준비합니다.
• 운영 데이터, 개인정보, secret은 제거하거나 안전한 placeholder로 바꿉니다.
• 변경 작업이라면 승인자, backup, rollback 가능 여부를 확인합니다.

복사해서 쓰는 프롬프트

현재 matrix를 최적화해줘.
지원 정책: {{SUPPORT_POLICY}}
사용자 환경 비중: {{USAGE}}
최근 조합별 실패·시간: {{CI_DATA}}
PR 목표 시간·예산: {{BUDGET}}

PR 필수 matrix, nightly 전체 matrix, release gate를 나누고 제외 위험과 측정 방법을 제안해줘.

실행 순서

1. placeholder를 실제 환경 정보로 바꾸되 secret 값은 입력하지 않습니다.
2. 먼저 조회와 미리보기로 대상 범위, 권한, 현재 상태를 확인합니다.
3. 결과가 예상과 맞을 때만 가장 작은 단위로 실행하거나 초안을 생성합니다.
4. 변경 전후의 수치와 화면을 같은 조건에서 비교해 기록합니다.
5. 이상이 있으면 작업을 넓히지 말고 중단 조건과 rollback 절차를 따릅니다.

결과 확인

대표 변경 몇 개로 queue와 완료 시간을 측정하고 nightly에서만 발견되는 실패율을 추적합니다. 최소·최신 지원 버전은 release 전에 반드시 검증합니다.

검수 결과에는 확인한 사실, 아직 확인하지 못한 가정, 다음 행동을 분리해서 남깁니다. 다른 사람이 같은 입력으로 재현할 수 있도록 환경과 확인 시각도 함께 기록하면 좋습니다.

주의사항

최근 실패가 없다는 이유만으로 특정 OS나 최소 지원 버전을 제거하지 않습니다. 공식 지원 약속을 바꾸려면 문서와 사용자 공지가 먼저 필요합니다.

AI가 만든 설명과 명령은 초안입니다. 실제 제품 버전과 조직 정책, 공식 문서를 대조하고 영향이 있는 작업은 dev나 격리 환경에서 먼저 검증하세요.

판단 기준

이 질문에는 모든 상황에 맞는 한 가지 답이 없습니다. 독자의 목적, 운영 위험, 팀의 검수 역량, 변경을 되돌릴 수 있는지를 기준으로 선택합니다. 먼저 작은 범위에서 두 선택지를 비교하고 결과를 기록한 뒤 적용 범위를 넓히세요.