Running Elasticsearch on Kubernetes the Easy Way, Part 2 — Data Node Warm-Up

간단 소개

Karrot은 Elasticsearch의 Kubernetes 롤링 재시작 중 발생하는 지연 시간 문제를 search-coordinator 프록시 기반 웜업 시스템으로 해결하여 안정적인 배포를 가능하게 했다.

AI Summary

Elasticsearch 배포 문제점

Karrot의 Elasticsearch 인프라 확장으로 배포 부담 증가 및 ECK 롤링 재시작 시 캐시 콜드 노드로 지연 시간 급증과 장애 발생.
Kubernetes 기본 기능은 웜업 전 트래픽 제어에 한계, 피크 시간 배포 불가. search-coordinator 솔루션
search-coordinator 프록시 도입, 서비스-ES 간 트래픽 제어 및 웜업 오케스트레이터 역할.
Central Dogma prefer_nodes로 노드 관리, Redis 락과 실제 트래픽 (Kafka)으로 웜업 자동화. 운영 성과 및 안정성
피크 시간에도 안전한 배포 가능, p99 지연 시간 안정화.
예상치 못한 노드 재시작 자동 처리, 동시 웜업 노드 수 제한으로 샤드 가용성 보장.