카나리 배포 도입과 상품 유닛의 쓱데이 대응기

간단 소개

쓱데이 대응을 위한 카나리 배포 도입 배경, 활용 방법, 그리고 실제 적용 사례를 통해 얻은 교훈을 공유합니다.

AI Summary

카나리 배포 소개 및 도입 배경
- 카나리 배포는 일부 서버에 먼저 배포하여 문제 여부를 확인 후 점진적으로 확장하는 방식이다.
- 상품 유닛은 트래픽이 많고 서비스 전반에 영향을 주어 장애 발생 시 심각한 문제로 이어진다.
- 쓱데이 기간 트래픽 급증으로 인한 성능 문제 해결을 위해 카나리 배포를 도입했다.
카나리 배포 활용 및 장점
- 성능 테스트, 안정성 확보, A/B 테스트에 유용하게 활용 가능하다.
- A/B 테스트 시 분기문 없이 비율 조정이 가능하며, 캐시 의존적인 API 전환 시 안정적인 전환을 돕는다.
- 대형 사고를 작게 만들 수 있다는 큰 장점이 있다.
카나리 배포의 이슈 사례 및 교훈
- 카나리 배포가 제대로 전파되지 않아 문제가 발생한 사례가 있었다.
- Java 21 가상 스레드 적용 중 Thread Pinning 문제 발생, 카나리 배포 미적용으로 전체 파드에 장애 발생.
- 작은 귀찮음과 방심이 대형 사고를 불러올 수 있으므로, 상황에 맞게 적절히 활용해야 한다.