딜리버리 프로덕트 개발팀의 개발문화 - 로그 & 알람편

간단 소개

컬리 딜리버리팀의 안정적인 서비스 제공을 위한 로그 및 알람 시스템 개선 사례와 지속적인 관리의 중요성을 소개합니다.

AI Summary

로그 및 알람 시스템 개선의 필요성
- 복잡도 증가와 서비스 안정성 저하 문제를 해결하기 위해 로그 및 알람 시스템 개선이 필요.
- 무분별한 에러 로그로 인한 피로감과 경계심 저하 방지.
로그 레벨 기준 재정립 및 알람 설정
- 에러(ERROR): 즉각 대응 필요한 경우, 알람 즉시 반응.
- 경고(WARN): 당장 문제 없으나 빈도 높을 시 문제 가능성, 임계치 넘으면 알람.
- 공통 범위 알람 설정 후 필요시 별도 알람으로 분리.
실제 사례 및 지속적인 관리 중요성
- 가짜 에러는 경고 로그로 변경, 실제 에러는 즉시 대응.
- 외부 시스템 연동 시 타임아웃은 경고 로그로, 제어 불가능한 로그는 알람 대상에서 제외 또는 적절한 알람 설정.
- 로그는 코드처럼 꾸준히 관리하고, 개발 환경에서부터 습관화하여 디버깅 능력 향상 및 문제 예방.