← Plantillas · Herramientas de desarrollo
CR

Crawl4AI

Comunidad

Open-source, LLM-friendly web crawler and scraper — turns any page into clean markdown or structured data for RAG pipelines.

Desplegar Crawl4AI Plan gratis, sin tarjeta.

Qué obtienes

  • Corre desde la imagen oficial unclecode/crawl4ai:0.9.5
  • Una plantilla comunitaria, aún no verificada de extremo a extremo por el equipo de Railyard
  • HTTPS automático y despliegues sin downtime

Cómo desplegar Crawl4AI

  1. 1

    Conecta un servidor

    Conecta un servidor de DigitalOcean, Hetzner o Vultr a Railyard, o cualquier servidor Linux por SSH.

  2. 2

    Haz clic en "Desplegar Crawl4AI"

    Railyard construye el contenedor.

  3. 3

    Configura tu dominio

    Apunta tu dominio a la app. Railyard emite un certificado HTTPS y lo renueva automáticamente.

Por qué desplegar en Railyard

Railyard la corre sola en un servidor que ya pagas — sin complementos que aprovisionar, con despliegues sin downtime y escalado incluidos igual.

Desplegar Crawl4AI es una pieza de un stack más grande que puedes seguir construyendo — agrega una base de datos, un worker, un cache, u otra app, todo en los mismos servidores que ya pagas.

Ideal para

  • Turning arbitrary web pages into clean markdown for a RAG ingestion pipeline
  • Structured data extraction from sites without a public API
  • Bulk crawling for dataset or search-index building

Bueno saber

  • The headless Chromium backend needs real shared memory — undersized /dev/shm causes browser-strategy crawls to crash
  • Add your own LLM provider key from the UI if you use the LLM-based extraction strategy — the default fetch strategy doesn't need one

Documentación del proyecto ↗

Preguntas frecuentes

¿Cuánto cuesta autohospedar Crawl4AI?
Free cubre 1 servidor más un servidor de base de datos y 3 apps, sin tarjeta. Pro cuesta US$19/mes por equipo para hasta 5 servidores y apps ilimitadas. Team cuesta US$49/mes por equipo para servidores ilimitados. Pagas a tu proveedor de nube directamente por el servidor; Railyard no agrega margen sobre el cómputo.
¿Qué necesito para autohospedar Crawl4AI?
Un servidor de un proveedor como DigitalOcean, Hetzner o Vultr. Crawl4AI corre sola, sin nada más que aprovisionar, con HTTPS y tu dominio configurados.
¿Cómo despliego Crawl4AI en mi propio servidor?
Conecta un servidor a Railyard, haz clic en "Desplegar Crawl4AI" y configura tu dominio. Railyard construye el contenedor, conecta los servicios que necesita y emite un certificado HTTPS automáticamente.
¿Puedo usar mi propio dominio con Crawl4AI?
Sí. Apunta un registro DNS a tu servidor y Railyard emite y renueva un certificado HTTPS automáticamente.

Plantillas relacionadas