메
메가존클라우드
July 8, 20241회
Snowflake Connector(Python)용 AWS Lambda Custom Layer

간단 소개
Snowflake Connector를 AWS Lambda에서 사용하기 위한 Custom Layer 생성 및 설정 방법을 설명합니다.
AI Summary
- Snowflake Connector를 위한 AWS Lambda Custom Layer 생성
- Snowflake Task를 AWS Lambda에서 실행하기 위해 Snowflake Connector가 필요하지만, Lambda는 이를 기본적으로 지원하지 않음
- 따라서 Custom Layer를 생성하여 Lambda 함수가 정상적으로 작동하도록 환경을 구성해야 함
- Custom Layer 생성 단계
- Ubuntu EC2 인스턴스를 생성하여 리눅스 환경 준비 (Amazon Linux에서 동작)
- 필요한 Dependencies 설치 및 압축 파일 생성 (개인 랩탑에서 생성 시 오류 발생 가능성 존재)
- AWS Lambda Custom Layer 생성 후 ARN 복사
- Lambda 함수 생성 후 Layer 추가 및 Sample 코드 실행을 통해 정상 동작 확인
- 정상 동작 확인
- Lambda 함수에 Snowflake 접속 정보를 입력하고, Task를 실행하는 코드를 추가
- 테스트를 통해 Python Connector가 정상적으로 동작하는지 확인
Next Feeds
모델 기반 시스템 엔지니어링(MBSE) 도전기 #2
MBSE 방법론 적용을 위한 Magic Grid 프레임워크와 SysML 모델링 언어 소개 및 활용 방안을 제시합니다.
MBSEMagic GridSysML시스템 엔지니어링모델링 언어
2024. 7. 8.
현대자동차

Figma 플러그인, 디자이너가 직접 만들어 보기
디자이너가 ChatGPT를 활용하여 Figma 플러그인을 개발하고, 업무 효율성을 향상시킨 경험 공유.
Figma플러그인ChatGPTTypeScript디자인
2024. 7. 8.
넷마블

서버리스에서 쿠버네티스로 - Airflow 운영 경험기
컬리는 Airflow를 관리형 서비스에서 K8S로 전환하며 CPU 과부하, OOM, 로그 문제 등을 해결하고 비용 절감 효과를 얻었습니다.
AirflowKubernetesK8SOOMGitSync
2024. 7. 8.
컬리

PR 생성될때, 자동으로 이미지 용량 최적화 하기
GitHub Actions와 TinyPNG API를 활용하여 PR 생성 시 이미지 용량을 자동으로 최적화하는 방법을 소개합니다.
GitHub ActionsTinyPNG이미지 최적화자동화API
2024. 7. 8.
PRND

롯데온의 코딩 파트너, GitHub Copilot 도입기
롯데ON의 GitHub Copilot 도입 사례를 통해 주요 기능, 활용법, 효과 및 한계점을 분석하고 개발 생산성 향상에 대한 기여를 강조합니다.
GitHub CopilotCode Completion코드 리팩토링코드 리뷰개발 생산성
2024. 7. 8.
롯데ON
[보안 컨퍼런스] .HACK 2024 참가 후기
.HACK 2024 컨퍼런스 참관 후기로, 키노트 내용, 주요 세션 발표 내용, 다양한 이벤트 및 느낀점을 요약.
보안컨퍼런스사이버보안해킹취약점
2024. 7. 5.
현대자동차