마케터를 돕는 LLM 기반 DMP - Seg Lens 시스템 개발기

기존 DMP의 한계와 LLM 도입

• 기존 DMP는 마케터가 직접 복잡한 데이터 조건을 수동으로 설정해야 했으며, 이는 시간 소모와 낮은 데이터 접근성을 초래했습니다.
• 방대한 데이터 속에서 숨겨진 타겟 조합을 놓치고, 직관적 탐색이 어려워 마케팅 전략 수립보다 쿼리 작성에 리소스가 집중되는 문제가 있었습니다.
• 마케터의 **자연어 의도(Intention)**를 이해하고 **의미 기반 탐색(Semantic Search)**을 가능하게 하는 LLM(Large Language Model) 도입의 필요성이 대두되었습니다.

Seg Lens 시스템의 주요 기능 및 구성

• Seg Lens는 마케터의 의도를 해석하여 최적의 타겟 세그먼트를 찾아주는 LLM 기반 지능형 마케팅 툴입니다.
• 주요 기능으로 자연어 세그먼트 추출, 이미지 분석, 키워드 확장, 벡터 검색 기반 의미 탐색, 결과 필터링 등을 제공합니다.
• 시스템은 **벡터 데이터베이스(Vector DB)**와 DIA(DMP Intelligence API) 모듈로 구성됩니다.

벡터 DB 구축 및 DIA 서비스 플로우

• 벡터 DB는 Semantic Expansion으로 임베딩 정확도를 높이고, Batch API로 비용 효율성과 안정성을 확보하며, Elasticsearch의 Dense Vector와 코사인 유사도로 의미 기반 검색을 구현합니다.
• 서비스별/권한별 데이터 접근 제어를 위해 검색 쿼리 필터에 자원 정보를 반영합니다.
• DIA는 LLM을 통해 질의를 의미 단위 분석 및 세그먼트 추출하고, 키워드 검색과 벡터 검색을 하이브리드로 병합하여 최종 추천 결과를 제공합니다.