빅뱅 배포, QA는 어떻게 살아 남았나: GMS 프로젝트 테스트 전략 백서

간단 소개

올리브영 GMS 프로젝트의 빅뱅 배포 전략 하에서 QA는 리스크 관리, 단계별 테스트, 데이터 정합성 검증, 운영 환경 검증 및 지속적인 품질 모니터링을 통해 시스템 안정성을 확보했습니다.

AI Summary

GMS 프로젝트의 빅뱅 배포와 리스크 관리
- 올리브영 GMS 프로젝트는 빅뱅 배포 방식으로 진행되어 높은 리스크를 수반했습니다.
- QA는 Risk Factor를 식별하고 E2E 통합 테스트 필요성을 강조했습니다.
- 개발 환경 제약 속에서 테스트 가능/불가능 영역을 구분하여 전략을 수립했습니다.
단계별 전략적 테스트 및 데이터 정합성 검증
- 기능 단위 테스트에서 결함 발견율에 집중하고, 동시성 테스트로 충돌 가능성을 제거했습니다.
- 통합 테스트에서는 Interface Spec 기반 E2E Test Suite를 구성하여 시스템 간 연계를 검증했습니다.
- Interface Contract Test를 통해 데이터 정합성 및 스키마 호환성을 검증했습니다.
운영 환경 검증 및 지속적인 품질 모니터링
- 실제 물류센터 환경에서 UAT를 수행하여 운영 환경 기반의 검증을 진행했습니다.
- Datadog 기반의 커스텀 모니터링 룰을 구축하여 조용한 실패를 실시간으로 탐지했습니다.
- QA는 지속적인 고민과 방향 조정을 통해 최적의 테스트 전략을 설계해야 함을 강조합니다.