비트윈의 HBase 스키마 해부

간단 소개

비트윈은 HBase를 메인 DB로 활용, Thrift, Haeinsa, Datastore 라이브러리, Secondary Index 등을 통해 효율적인 데이터 관리 및 접근을 구현했습니다.

AI Summary

비트윈의 HBase 활용
- 비트윈은 HBase를 메인 데이터베이스로 사용하며, 사용자, 커플 정보, 메시지, 사진, 메모 등 다양한 데이터를 저장합니다.
- Thrift를 사용하여 데이터 구조를 정의하고 직렬화/역직렬화합니다.
- Haeinsa를 통해 Multi-Row ACID 트랜잭션을 지원하여 데이터 무결성을 유지합니다.
데이터 구조 및 접근 방식
- 데이터를 종류별로 테이블에 나누어 저장하고, 관련된 데이터를 하나의 Row에 모아 저장합니다.
- Column Qualifier를 트리 형태로 구성하여 데이터의 논리적 구조를 반영합니다.
- Datastore 라이브러리를 통해 HBase 데이터에 쉽게 접근하고, Secondary Index를 구현하여 특정 값으로 데이터 정렬 및 접근을 가능하게 합니다.
Secondary Index 구현 및 고려 사항
- HBase는 Secondary Index를 기본적으로 제공하지 않지만, 비트윈은 자체적으로 간단한 형태의 Secondary Index를 구현하여 사용합니다.
- Index 업데이트는 Trigger 기능을 통해 데이터 변경과 함께 원자적으로 수행되어 데이터 무결성을 보장합니다.
- Row Key를 랜덤하게 생성하여 데이터가 여러 Region 서버에 분산되도록 합니다.