Recuperación de agentes de dos niveles

Definicion

La recuperación de agentes de dos niveles es una arquitectura en la que un agente de IA utiliza una API de búsqueda estructurada de bajo costo para el descubrimiento inicial y solo llama a un raspador de página completa para las URL que pasan un filtro de relevancia.

En profundidad

La matemática de costos es clara. Un servicio de scraping como Firecrawl cuesta $0,0016 por página en su plan anual de $83/100k. Una API SERP estructurada como Scavio cuesta $0,005 por consulta, pero devuelve 10 resultados con títulos, URL, fragmentos y metadatos; no es necesario realizar scraping para la mayoría de las búsquedas. Si un agente puede responder el 80% de las consultas únicamente a partir de datos de fragmentos de SERP, el costo efectivo por consulta respondida cae de $0,016 (10 páginas extraídas) a $0,005 (1 llamada SERP). La arquitectura tiene dos puntos de decisión. Primero, el agente llama a la API de búsqueda e inspecciona los datos de resultados estructurados. Si el fragmento de algún resultado contiene los datos necesarios (precio, fecha, definición), el agente lo extrae y se detiene. En segundo lugar, solo si los datos estructurados son insuficientes, el agente pasa las 1 o 2 URL principales al raspador. Este enfoque de dos puertas normalmente reduce las llamadas de scraper entre un 75% y un 90% en tareas de recuperación de información. Para las tareas de fijación de precios de comercio electrónico, los datos estructurados SERP (campos de precios de los resultados de Google Shopping) satisfacen la consulta entre el 60% y el 70% de las veces. Para el contenido completo del artículo o datos dinámicos, siempre se necesita el nivel raspador. Crear perfiles de los tipos de consultas de su agente antes de elegir entre niveles evita la ingeniería excesiva.

Uso de ejemplo

Plataformas

Recuperación de agentes de dos niveles es relevante en las siguientes plataformas, todas accesibles a través de la API unificada de Scavio:

• google
• amazon

Terminos relacionados