SQS 기반 알림톡 처리에서 발생한 DB 커넥션 데드락 분석기

간단 소개

올리브영은 SQS 기반 알림톡 시스템 도입 후 발생한 DB 커넥션 데드락을 SQS 폴링, HikariCP, 트랜잭션 전파 옵션 튜닝으로 해결했습니다.

AI Summary

기존 알림톡 구조의 문제점
- 각 비즈니스 로직에 알림톡 전송 로직이 개별 구현되어 유지보수가 어렵고 재전송 프로세스가 부재했습니다.
- 외부 API 호출 지연 시 비즈니스 트랜잭션 전체가 대기 상태에 빠져 모놀리식 애플리케이션에 부하가 집중되었습니다.
SQS 기반 이벤트 알림 구조 도입
- Amazon SQS 기반 이벤트 기반 구조로 전환하여 비즈니스 로직과 알림 발송을 분리했습니다.
- Amazon EventBridge를 활용해 실패 건에 대한 주기적 재시도를 구현하고, 알림 발송 로직을 공통 인터페이스로 표준화하여 트랜잭션 결합을 해소했습니다.
DB 커넥션 데드락 발생 및 해결
- 배포 후 HikariPool 타임아웃 에러가 발생했으며, 이는 SQS 폴링 병렬 처리, HikariCP maximumPoolSize 한계, REQUIRES_NEW 트랜잭션 전파 옵션의 복합 작용으로 인한 데드락이었습니다.
- 해결책으로 불필요한 REQUIRES_NEW 옵션을 제거하고, SQS MaxNumberOfMessages를 DB 커넥션 풀 크기에 맞춰 조정하여 커넥션 경합을 해소했습니다.