빅뱅 배포, QA는 어떻게 살아 남았나: GMS 프로젝트 테스트 전략 백서

간단 소개

올리브영 GMS 프로젝트의 빅뱅 배포 전략 하에 QA가 리스크를 관리하고 안정적인 시스템을 구축하기 위해 수행한 테스트 전략과 경험을 공유합니다.

AI Summary

GMS 프로젝트의 빅뱅 배포와 리스크 관리
- 올리브영 GMS 프로젝트는 빅뱅 배포 방식으로 진행되어 높은 리스크를 가졌음
- QA는 Risk Factor를 식별하고, E2E 테스트 범위를 제한하여 전략 수립
단계별 전략적 테스트
- 기능 단위 테스트에서 결함 발견율을 높이고, 동시성 테스트로 Race Condition을 방지
- 통합 테스트에서 Interface Spec 기반 E2E 테스트 스위트 구성 및 Interface Contract Test를 수행하여 데이터 정합성 검증
운영 환경 검증 및 모니터링
- 실제 운영 환경과 유사한 UAT를 통해 WCS 연동 및 데이터 정합성 검증
- Datadog 기반 커스텀 모니터링 룰을 구축하여 '조용한 실패'를 실시간으로 탐지
- QA는 지속적인 고민과 개선을 통해 최적의 테스트 전략을 설계해야 함