DocumentDB 성능 최적화: 슬로우쿼리 수집부터 AI를 활용한 인덱스 추천까지

간단 소개

DocumentDB 성능 최적화를 위해 슬로우쿼리 수집, 오픈서치 전송, ChatGPT API를 활용한 인덱스 추천 파이프라인을 구축하고 성능을 개선한 사례.

AI Summary

DocumentDB 성능 최적화 파이프라인 구축
- DocumentDB 프로파일러를 설정하여 슬로우 쿼리 로그를 CloudWatch에 기록.
- CloudWatch 로그를 **오픈서치(OpenSearch)**로 전송하기 위해 Firehose 스트림과 람다(Lambda) 핸들러를 구성.
- 오픈서치에 수집된 데이터를 기반으로 슬로우 쿼리 대시보드를 구축하고, 슬랙 알림을 설정하여 모니터링 강화.
ChatGPT API를 활용한 인덱스 추천
- 컬렉션 스캔 쿼리 발생 시 ChatGPT API를 통해 최적의 인덱스를 추천받아 오픈서치로 전송하는 파이프라인 구축.
- 추천받은 인덱스를 기반으로 개발자가 직접 인덱스를 생성하여 성능 개선.
성능 개선 결과
- 지난 1주일 동안 추천받은 인덱스를 지속적으로 생성한 결과, 컬렉션 스캔 쿼리 발생이 사라짐.
- 슬로우 쿼리 합계가 약 30% 감소하고, 500ms 이상 슬로우 쿼리가 대부분 개선됨.
- 매일 실행되는 무거운 쿼리(20초 이상)가 사라지는 등 전반적인 성능 향상.