Firecrawl

Firecrawl es una API que hace scraping y rastreo de sitios web y devuelve el contenido en Markdown o JSON limpio. Le pides una URL y recibes el texto de esa página; le pides un dominio y rastrea las páginas enlazadas y te devuelve todas. Gestiona el renderizado de JavaScript, los bloqueos y la limpieza del HTML.

El caso de uso principal es alimentar aplicaciones de IA: bases de conocimiento para RAG, agentes que investigan en la web, o flujos que necesitan el contenido de un sitio como entrada. Es open source y también se ofrece como servicio gestionado con API key.

En vibe coding, Firecrawl entra cuando tu app necesita datos de la web: un asistente que responde a partir de la documentación de un producto, una herramienta que resume la web que pega el usuario, o un proceso que indexa un sitio para búsqueda semántica.

El patrón: guardas la API key como variable de entorno, llamas al endpoint de scrape o de crawl desde una función de servidor, y guardas el Markdown que devuelve en tu base de datos o lo pasas directamente al modelo. Herramientas como n8n y Make tienen nodos que llaman a Firecrawl sin escribir código.