- Apify는 4,500개 이상의 사전 구축된 '액터(Actor)'를 통해 웹 스크래핑 및 자동화를 지원하는 마켓플레이스입니다. 🎭
- 액터는 특정 요청을 보내면 미리 정의된 스크립트를 실행하여 데이터를 수집하는 가상 비서와 같습니다. 🤖
- Google Maps 리드, TikTok 비디오, LinkedIn 채용 정보 등 거의 모든 웹 데이터를 코딩 없이 스크래핑할 수 있습니다. 🌐
- n8n과 Apify를 연동하여 스크래핑 워크플로우를 자동화하는 가장 쉬운 방법은 2단계 프로세스입니다. 🔄
- 첫 번째 단계는 HTTP POST 요청으로 Apify 액터를 시작하는 것이고, 두 번째 단계는 HTTP GET 요청으로 완료된 결과를 가져오는 것입니다. 🚀
- 액터 설정은 해시태그, 비디오 수 등 마치 이커머스 웹사이트 필터를 사용하는 것처럼 간단하게 JSON 형태로 구성할 수 있습니다. ⚙️
- 동기식(synchronous) 실행보다 비동기식(asynchronous) 2단계 접근 방식이 더 일관성 있고 안정적입니다. 💡
- 액터 실행 후 결과가 준비될 때까지 '대기(wait)' 단계를 추가하여 데이터 누락을 방지하는 것이 중요합니다. ⏳
- 더 동적인 결과 처리를 위해서는 '폴링(polling)' 기법을 사용하여 결과 완료 여부를 반복적으로 확인할 수 있습니다. 📡
- Apify 가입 시 '30 Nate Herk' 코드를 사용하면 30% 할인을 받을 수 있습니다. 💰





