AnyCrawl preguntas frecuentes

¿Qué es AnyCrawl?

AnyCrawl es un rastreador (crawler) basado en Node.js/TypeScript diseñado para transformar sitios web en datos limpios y estructurados optimizados para modelos de IA y Large Language Models (LLMs). Ofrece características como rastreo en tiempo real, soporte multi-motor y procesamiento de alto rendimiento para extraer contenido significativo de cualquier sitio web.

¿Es legal el web crawling con AnyCrawl?

La legalidad del web crawling depende de los términos de servicio del sitio web objetivo y de las leyes aplicables. AnyCrawl proporciona las herramientas, pero los usuarios son responsables de asegurarse de que sus actividades de rastreo cumplan con las regulaciones y políticas del sitio web pertinentes.

¿Qué formatos de datos admite AnyCrawl?

AnyCrawl admite múltiples formatos de datos, incluyendo Markdown, JSON y HTML estructurado. Puede manejar imágenes, videos y otros archivos multimedia, proporcionando una salida limpia y organizada perfecta para el procesamiento posterior y aplicaciones de IA.

¿Maneja sitios web renderizados con JavaScript?

Sí. AnyCrawl puede manejar sitios web renderizados con JavaScript utilizando el motor Playwright. Admite Single Page Applications (SPAs) y la carga dinámica de contenido, garantizando una extracción de datos completa de aplicaciones web modernas.

¿Cómo funciona el precio?

AnyCrawl utiliza un sistema basado en créditos donde aproximadamente 1 crédito equivale a 1 página/URL scrapeada. Los planes de precios van desde un nivel gratuito con 1.500 créditos mensuales hasta planes empresariales con hasta 100.000 créditos y soluciones personalizadas para requisitos específicos.

¿Qué cuenta como un crédito?

Un crédito generalmente se consume cuando AnyCrawl procesa una URL o página web. El uso exacto de créditos puede variar según la complejidad de la página y las funciones específicas utilizadas durante el rastreo.

¿Puedo programar rastreos recurrentes?

Los rastreos programados estarán disponibles próximamente como función. Actualmente, los usuarios pueden iniciar manualmente los rastreos a través de la API o el panel de control, con planes para introducir una programación automatizada para tareas de extracción de datos recurrentes.

¿Ofrecen soporte para proxy?

Sí. AnyCrawl incluye soporte de proxy rotativo para ayudar a los usuarios a gestionar direcciones IP y evitar la limitación de velocidad al rastrear múltiples páginas o sitios web. Esta función está disponible en todos los planes de pago.

• Accede al sitio web de AnyCrawl en https://anycrawl.dev/ para explorar sus características y capacidades.
• Regístrate para obtener una cuenta gratuita y recibir 1,500 créditos para comenzar a utilizar el servicio de rastreo web.
• Utiliza la API proporcionada para integrar AnyCrawl en tus aplicaciones, permitiendo la extracción de datos web sin problemas.
• Ingresa las URL deseadas para rastrear y selecciona el motor apropiado (por ejemplo, auto) para obtener resultados óptimos.
• Revisa la salida de datos estructurada, que está formateada para el consumo de IA y LLM, garantizando información limpia y organizada.