Hormiga raspadora

Un equipo que extrae los precios de los productos de Amazon utiliza ScrapingAnt con el renderizado JS habilitado (10 créditos/solicitud). Con 50.000 productos al mes, consumen 500.000 créditos (plan de $49 al mes). Al cambiar al punto final de Amazon de Scavio (1 crédito/solicitud, $0,005 cada una), las mismas 50.000 consultas cuestan $250/mes pero devuelven JSON estructurado con precio, calificación y datos del vendedor, sin necesidad de análisis HTML. ScrapingAnt sigue siendo útil para su panel de control personalizado de la competencia que elimina las páginas de precios posteriores al inicio de sesión.

Hormiga raspadora es relevante para Google, Amazon. Scavio proporciona una API unificada para acceder a datos de todas estas plataformas.

El precio de ScrapingAnt comienza con un nivel gratuito de 10,000 créditos API/mes, luego $19/mes por 100 mil créditos, $49/mes por 500 mil y $249/mes por 3 millones de créditos. El problema es el consumo de crédito variable: una solicitud básica cuesta 1 crédito, pero habilitar la representación de JavaScript y los proxies premium puede costar hasta 125 créditos por solicitud. Para los sitios protegidos por Cloudflare, a menudo se requieren proxies premium, lo que hace que el costo efectivo por solicitud sea entre 10 y 125 veces la tarifa base. Para los datos que se encuentran en los resultados de búsqueda (precios de productos, listados de empresas, calificaciones de reseñas, artículos de noticias), las API SERP estructuradas devuelven los mismos datos que JSON escritos sin administración de proxy. Scavio cobra una tarifa fija de $0,005/crédito (1 crédito por solicitud) para los resultados de Google, Amazon, YouTube, Walmart y Reddit. ScrapingAnt gana cuando necesita datos de sitios web arbitrarios detrás de la autenticación o con extracción DOM personalizada. Las API SERP ganan cuando los datos se indexan públicamente.