- Firecrawl은 웹사이트 데이터를 LLM이 사용할 수 있는 형태로 빠르게 변환해 줍니다. 🚀
- Firecrawl은 스크레이핑, 크롤링, 매핑, 추출 기능을 제공하며, 특히 추출 기능은 URL과 프롬프트를 통해 특정 정보를 얻을 수 있습니다. 🎯
- 'scrape'는 웹사이트의 HTML 또는 마크다운 데이터를 가져오는 반면, 'extract'는 URL과 함께 LLM 프롬프트를 사용하여 원하는 정보를 추출합니다. 🤖
- n8n에서 Firecrawl API를 사용하려면 API 키를 설정하고, curl 명령어를 가져와 HTTP 요청 노드를 구성해야 합니다. 🔑
- Firecrawl의 비동기 추출 상태를 확인하기 위해, 추출 ID를 사용하여 주기적으로 상태를 확인하는 폴링(polling) 메커니즘을 구현할 수 있습니다. 🔄