글로벌 서비스에서 지역 통신사 네트워크 이슈 트러블슈팅하기

간단 소개

글로벌 서비스에서 특정 지역 통신사 네트워크 이슈를 데이터 분석과 Mobile Proxy를 통해 해결하고, TTD 개선을 위한 회고를 담고 있습니다.

AI Summary

문제 상황 분석
- 2024년 초, 특정 국가(XY) 일부 사용자에게서 컴포넌트 A 관련 오류 발생. 초기에는 소수 CS 건수로 간과되었으나, 점차 증가 추세.
- 기존 모니터링 시스템으로 지역 네트워크 문제 추적 불가, 문제 해결의 시급성 증대.
데이터 분석 및 원인 특정
- CS 데이터 분석 결과, 특정 통신사(Z) 사용자에게 집중된 오류 확인. read timed out 에러가 주 원인임을 파악.
- Mobile proxy(Oxylabs)를 활용, 통신사 Z의 특정 IP 대역(3G IP pool)에서 STOMP 통신 지연 확인. SNI 미포함 시 QoS 저하 추정.
해결 및 개선
- Android, iOS 핫픽스를 통해 SNI 포함 기능 추가 및 배포. 오류 감소 및 CS 감소 효과 확인.
- TTD 개선을 위해 mobile proxy 솔루션 활용, 글로벌 네트워크 연결성 자동 테스트 및 메트릭 수집 계획.