올리브영 QA의 AWS Lambda를 통한 On call 도입기

간단 소개

올리브영 QA팀은 AWS Lambda를 활용하여 On-call 시스템을 구축, 장애 대응 속도를 높이고 관리 효율성을 개선했습니다.

AI Summary

On-call 시스템 도입 배경
- 기존 슬랙 알림 방식의 한계: 알림 미확인 시 장애 전파 지연.
- 빠르고 쉬운 장애 전파를 위해 On-call 시스템 도입 필요.
AWS Lambda를 활용한 시스템 구축
- AWS Lambda: 서버리스 컴퓨팅 서비스로, 서버 관리 없이 코드 실행 가능.
- 슬랙봇 명령어로 인시던트 생성 후 Lambda 함수 호출하여 인시던트 채널 자동 생성.
- CloudWatch Logs를 트리거로 Jira 티켓 자동 생성 및 온콜 웹 훅 호출.
Lambda 도입 효과 및 어려움
- 확장성, 비용 절감, 유연성 확보.
- Jira 연동 시 사내망 접근 제한으로 어려움 겪었으나 인프라 지원으로 해결.
- 코드 길이 증가 문제 해결 위해 함수 분리, 가독성 및 유지보수성 향상.
- 장애 발생 시 즉시 담당자에게 연락 가능, Jira 티켓 자동 생성으로 관리 효율성 증대.