Amazon RDS for PostgreSQL에서 고성능 시계열 데이터 테이블 설계

Amazon RDS for PostgreSQL 시계열 데이터 최적화

• Amazon RDS for PostgreSQL은 기존 트랜잭션 데이터와 조인하거나 배치 처리 시 시계열 데이터 저장에 적합합니다.
• 시계열 데이터는 append-only 특성으로 크기가 지속 증가하며, PostgreSQL 10+ 네이티브 파티셔닝과 PostgreSQL 13 파티션 프루닝 개선으로 성능 저하를 완화합니다. 데이터 타입 및 인덱스 전략
• 데이터 타입은 값 범위를 고려하여 과도한 할당을 피해야 하며, 'double precision' 대신 'real' 사용으로 DB 크기 및 로드 시간을 개선할 수 있습니다.
• B-Tree 대신 **BRIN (Block Range Index)**을 활용하여 시계열 데이터의 시간 범위 쿼리 성능을 최적화하고 인덱스 크기를 크게 줄일 수 있습니다. 파티셔닝 관리 및 성능 향상
• 네이티브 파티셔닝은 활성 데이터셋 크기를 작게 유지하여 'full-page writes' 및 메모리 초과 문제를 해결합니다.
• pg_partman과 pg_cron 확장을 통해 시간(time) 열 기준 범위 파티셔닝을 자동화하여 데이터 수집 처리량을 안정적으로 유지하고 성능을 획기적으로 향상시킵니다.