[v1][G6] Automated restore rehearsal 구축

[KeiaiLab-PHIL]

목표

periodic backup-restore rehearsal을 자동화하고 운영자가 복원 가능성을 반복 검증할 수 있게 한다.

작업

• rehearsal 대상 namespace/cluster/resource naming 정의
• 최신 backup 또는 지정 backup에서 임시 cluster restore
• smoke query / checksum / marker 검증
• rehearsal 성공/실패 metric 또는 condition 설계
• 월간 cron 또는 GitOps 운영 절차 정의
• cleanup/finalizer/잔여 PVC 정리 검증

완료 기준

• restore rehearsal live 실행 evidence
• 실패 감지 경로 존재
• docs/runbooks/restore.md 갱신
• make lint test validate PASS

[eightynine01]

2026-06-11 부분 진행 증거: PITR restore rehearsal E2E 자동화 PASS

이번 작업으로 test/e2e/pitr_restore_e2e_test.go가 실제 Kubernetes에서 다음 restore rehearsal을 자동 수행하도록 강화됐고, focused/p1 양쪽에서 통과했습니다.

자동화된 rehearsal 경로:

• namespace/cluster 생성
• filesystem pgBackRest repo 활성화
• full backup
• before marker 삽입
• target time 기록
• after marker 삽입 후 WAL archive 도착 확인
• hibernation으로 PostgreSQL 정지
• stopped PVC를 runner Job이 마운트해 PITR restore 수행
• hibernation 해제 후 before 존재, after 부재, checksum failure 0 확인

검증 결과:

• focused PITR: 8 Passed / 0 Failed
• p1 전체: 30 Passed / 0 Failed
• 로컬 게이트: make test, make validate, make lint PASS

남은 항목:

• 최신 backup/지정 backup 선택 로직
• 성공/실패 metric 또는 condition 설계
• 월간 cron/GitOps 운영 절차
• restore runbook 갱신
• cleanup/finalizer/잔여 PVC 운영 검증

따라서 restore rehearsal의 E2E 기반은 확보됐지만, 이슈 전체는 아직 close하지 않습니다.