AWS MLOps 분산학습 워크숍 방문기

간단 소개

AWS MLOps 분산학습 워크숍 참관 후기: MLOps 동향, SageMaker 활용 사례, 분산 학습 방법 및 SageMaker 포트폴리오 소개.

AI Summary

MLOps 동향 및 AWS SageMaker 소개
- AWS MLOps 분산학습 워크숍(2022년 11월) 참석 후기
- Emily Webber의 기조연설, MLOps 기초 및 해외 고객사 구축 사례 소개
- Data Mesh 개념 소개: 중앙 집중 방식 Lake의 역할별 분리 및 Mesh Catalog 활용
SageMaker를 활용한 국내 기업 사례 및 분산 학습
- LG에너지솔루션, 동화기업의 SageMaker 도입 사례 (제조 공정 적용)
- SageMaker 실습: ETL tool, Feature Store, Model Registry 등 다양한 기능 확인
- 분산학습 트렌드: Text-to-Image, Text-to-Video 등 대규모 모델 활용 증가
분산 학습 방법 및 SageMaker 포트폴리오
- 데이터 병렬 처리(Data Parallelism) 및 모델 병렬 처리(Model Parallelism) 소개
- AWS Trainium 칩을 활용한 분산 학습, Ephemeral Training 클러스터 사용법
- SageMaker Studio를 활용한 GPT-2 모델 학습 실습, Cloud Watch를 통한 log 확인
- SageMaker의 다양한 추론 포트폴리오 소개