Feed-Entity: 당근 피드의 심장

간단 소개

당근 피드 시스템의 핵심인 Feed-Entity 도입 배경, 구조, 데이터 파이프라인, 서빙 방식, 그리고 향후 개선 방향을 제시합니다.

AI Summary

Feed-Entity의 탄생 배경 및 목표
- 기존 피드 시스템의 분산된 형태와 그로 인한 데이터 구조의 비표준화, 시스템 확장성 제한 등의 문제점을 해결하기 위해 Feed-Entity 개념 도입.
- 데이터 구조 표준화, 시스템 확장성 개선, 데이터 일관성 확보, 통합 관리 시스템 구축, 사용자 경험 향상을 목표로 함.
Feed-Entity의 구조 및 데이터 파이프라인
- Feed-Entity는 피드에서 노출 가능한 최소 단위 콘텐츠로, ID, 타입, 소스 정보, 생성자, 생성/수정/노출 시간, 상태, Entity 등의 구성 요소를 가짐.
- 데이터 파이프라인은 데이터 수집, 변환, 검증 및 DLQ 처리, 메시지 큐 프로듀스 및 서비스 간 연동의 4단계로 구성되어 있으며, 각 단계는 모듈화되어 있어 확장성이 뛰어남.
Feed-Entity 서빙 및 향후 과제
- 지역별 특성을 고려한 Redis 캐싱 전략을 통해 데이터 접근 속도를 향상시키고, 다단계 저장 및 조회 구조를 통해 효율적인 데이터 접근을 제공.
- 향후 과제로 복합적 인덱싱 전략, 추천 모델 학습 활용, 탐색 시스템의 SSOT 확장 등을 계획하고 있으며, 이를 통해 사용자 맞춤형 경험을 더욱 세밀하게 제공하고자 함.