Elasticsearch Search After 성능 체크

간단 소개

Elasticsearch의 Search After 성능을 Scroll API와 비교 분석하고, PIT, Sliced Scroll과 함께 사용하는 방법을 제시합니다.

AI Summary

Elasticsearch Pagination 방법 비교
- Scroll API: 검색 결과를 묶어 스크롤 방식으로 제공, 메모리 부하 발생 가능성 존재.
- Search After: live cursor 제공, stateless 방식으로 메모리 부하 적음, ES 공식 문서에서 Scroll API보다 권장.
Search After 활용 및 성능
- 정렬 값 기반으로 다음 결과 조회, 정렬 불필요 시 _doc 정렬이 가장 빠름.
- PIT(Point In Time): 특정 시점 데이터 상태 캡처, Search After와 함께 사용하여 데이터 일관성 유지 (ES 7.10+).
- Sliced Scroll: Scroll의 병렬 처리, Scroll Search와 PIT에서만 사용 가능, 샤드 수와 동일한 슬라이스 수가 성능에 중요.
테스트 결과 및 결론
- Scroll API는 CPU 사용량이 높지만 상대적으로 빠르고 효율적임.
- Search After는 메모리 오버헤드는 낮지만 속도가 느림.
- 각 방식의 장단점을 고려하여 환경에 맞는 방법 선택 필요.