Luft 성능 리포트 2023.1

간단 소개

Luft 성능 개선 필요성과 도전, 향후 로드맵을 제시하고, 데이터 분산, 스토리지 개선, 파이프라인 최적화 등을 통해 성능을 향상시키고 있습니다.

AI Summary

성능 향상의 필요성
- AB180은 OLAP 데이터베이스인 Luft를 사용하여 대규모 사용자 데이터를 효율적으로 처리하고, 고성능 애플리케이션을 통해 고객에게 경쟁력 있는 비용으로 탁월한 기능을 제공합니다.
- 데이터 제공 기간 증가, 데이터 익명화, Funnel 리포트 제공 등 기능 추가 시 성능 유지가 중요합니다.
Luft 성능 개선 도전기
- 사용자 데이터 물리 노드 분산 개선, Instance store 대신 EBS 사용, 데이터 압축률 향상, Data ingestion 파이프라인 개선 등을 통해 성능을 개선했습니다.
- unsafe 사용 확대, 컬럼 별 데이터 다운로드 등의 최적화를 시도하고 있습니다.
향후 로드맵
- 성능 개선 지점 파악을 위한 데이터 수집 고도화, 쿼리 프로파일링, 쿼리 별 클러스터 분리, 메모리 관리 정책 수립 등을 계획하고 있습니다.
- 비용기반 옵티마이저 도입을 통해 성능을 더욱 향상시킬 계획입니다.