Partenariat Cloudflare-GoDaddy contre les bots IA

Un créateur d'agents IA a découvert que 35 % de ses cibles de scraping web renvoyaient des défis Cloudflare après le déploiement du partenariat GoDaddy. Ils sont passés à l'endpoint de recherche Google de Scavio pour les snippets SERP et les données structurées, éliminant complètement les requêtes bloquées tout en dépensant 0,005 $/requête au lieu de 0,01 à 0,03 $/requête pour le scraping basé sur des proxys.

Partenariat Cloudflare-GoDaddy contre les bots IA est pertinent pour Google. Scavio fournit une API unifiée pour accéder aux données de toutes ces plateformes.

En 2025, Cloudflare a élargi son partenariat de détection de bots IA avec GoDaddy, appliquant un blocage agressif des bots sur des millions de sites hébergés par GoDaddy. Le réseau de Cloudflare protège déjà environ 20 % du web, et avec GoDaddy hébergeant plus de 80 millions de domaines, la portée combinée rend le scraping direct peu fiable pour les agents IA. Le partenariat utilise le produit Bot Management de Cloudflare pour détecter et bloquer les requêtes automatisées, y compris les navigateurs headless, les proxys rotatifs et les user agents connus des robots IA. Pour les développeurs d'agents IA, cela signifie que tout pipeline reposant sur des requêtes HTTP directes ou l'automatisation de navigateur échouera sur un pourcentage croissant d'URL cibles. La solution pratique consiste à utiliser des API de recherche qui renvoient des données SERP sans scraper les pages individuelles. Les moteurs de recherche ont des accords de crawl existants avec les propriétaires de sites, donc leurs données indexées restent accessibles. Scavio renvoie des résultats de recherche structurés depuis Google, YouTube, Amazon, Walmart, Reddit et TikTok à 0,005 $/crédit, contournant complètement la protection Cloudflare car les données proviennent des index des moteurs de recherche, et non de visites directes de pages.