전국 3,500대 POS 실시간 모니터링 구축기

간단 소개

올리브영은 Datadog을 도입하여 전국 POS 시스템의 실시간 모니터링을 구축, 장애 감지 시간을 단축하고 운영 효율성을 향상시켰습니다.

AI Summary

POS 시스템 모니터링 문제점 및 Datadog 도입 배경
- 전국 3,500대 POS 시스템의 안정적인 운영이 중요하나, 오프라인 매장의 네트워크 불안정성으로 어려움이 존재.
- 기존 장애 대응 방식은 매장 제보 후 원격 접속으로 평균 5분 이상 소요되어 즉각적인 대응이 어려움.
- Datadog을 도입하여 로그 수집 및 모니터링 체계를 개선하고 운영 패러다임을 전환하고자 함.
Datadog 도입 과정 및 기술적 해결
- 폐쇄망 환경의 POS 시스템에서 Datadog 서버로 로그 전송을 위해 프록시 서버를 구성.
- 비표준 로그 포맷을 JSON 기반으로 표준화하고, 사용자 이벤트와 오류 로그 중심으로 선별 수집하여 Agent 리소스 부담을 최소화.
- POS 원격 관리 솔루션을 활용하여 Datadog Agent 설치를 자동화하고, 매장별 POS 장비 식별 체계를 구축.
Datadog 도입 효과 및 향후 계획
- 문제 탐지 시간이 76% 단축되었고, 로그 품질 향상 및 사전 대응 문화가 정착됨.
- 실시간 대시보드를 통해 여러 부서에서 공통된 데이터를 기반으로 협업하고 의사결정 속도를 향상시킴.
- 향후 결제 흐름 로그 분석 고도화 및 지능형 알람 시스템 구축을 계획.