하
하이퍼커넥트
February 18, 20251회
Flink SQL 도입기
간단 소개
Flink SQL 도입 배경, 선택 이유, 클러스터 구축 및 운영 경험 공유. Flink SQL은 빠른 개발과 운영 효율성을 제공하며 안정적인 스트리밍 처리를 지원한다.
AI Summary
- Flink SQL 도입 배경
- 레거시 Flink 앱의 유지보수 어려움과 인프라 변경으로 인한 문제 발생
- Flink App 재구축 시 다양한 선택지 (단일 앱, 여러 앱, Flink SQL) 고려
- Flink SQL 선택 이유: 빠른 개발, 운영 효율성, 기존 Flink 이해도 활용
- Flink SQL 선택 이유 및 대안 기술 비교
- High Availability: Checkpoint, Savepoint, HA 모드 JobManager, TaskManager 재분배
- 고급 스트리밍 기능: 윈도우, 조인, 이벤트 타임 처리, 워터마크 지원
- UDF, Custom Connector 를 통한 확장성
- ksqlDB, Spark Structured Streaming 과 비교 분석
- 클러스터 환경 구축 및 쿼리 배포 방식
- Kubernetes 기반 클러스터 구성 (Session mode)
- GitOps 패턴을 이용한 쿼리 배포 자동화
- JobManager, TaskManager Failover, 쿼리 오류, 클러스터 재시작 시 문제 해결 경험 공유
- 주요 모니터링 지표 소개 (numRunningJobs, taskmanager.cpu.load 등)
Next Feeds
Ktor로 팀 환경에 맞는 API 서버 구현하기
Ktor를 도입하여 팀 개발 환경에 맞는 API 서버를 구축하고, 다양한 플러그인을 활용하여 기능을 확장하는 과정을 공유합니다.
KtorAPI 서버플러그인Kotlin카카오페이
2025. 2. 17.
카카오페이
Cursor iOS 개발환경 세팅
Cursor는 AI 기반 코드 에디터로, iOS 개발 환경 설정 및 생산성 향상에 유용한 기능들을 제공한다. Xcode와 함께 사용하면 더욱 효과적이다.
CursoriOS 개발AI 에디터SweetpadXcode Build Server
2025. 2. 17.
딜라이트룸
리멤버에서 UT(사용자 테스트)는 어떻게 진행하나요?
리멤버의 UT 진행 방식과 설계, 실제 인터뷰 과정, 분석 및 개선 사례를 통해 UX 개선 과정을 소개합니다.
UT사용자 테스트UX 리서치프로덕트 디자인A/B 테스트
2025. 2. 17.
리멤버
토스 피플: 방황은 내게 방향을 제시해주었다
브랜드 디자이너에서 접근성 프로젝트 리더로 성장한 김유라님의 토스 여정, 정성적 경험의 가치와 토스 문화에 대한 이야기.
브랜딩접근성토스정성적 경험성장
2025. 2. 17.
토스
(Airflow #1) 데이터 엔지니어들이 선택하는 Apache Airflow 소개
Airflow는 데이터 엔지니어링을 위한 파이썬 기반 workflow 관리 및 스케줄링 도구이며, 다양한 아키텍처와 핵심 개념을 제공한다.
AirflowDAGworkflow스케줄링데이터 엔지니어링
2025. 2. 16.
현대자동차
올리브영 글로벌몰 주소 자동완성 및 검증 솔루션 도입기
올리브영 글로벌몰은 주소 자동완성 및 검증 솔루션 도입으로 고객 편의성을 높이고 운영 효율성을 개선했습니다.
올리브영글로벌몰주소 자동완성주소 검증고객 경험
2025. 2. 14.
올리브영