{
 "_note": "Serie des releves quotidiens des robots IA (Cloudflare > AI Crawl Control). Le plan Free ne propose que 1 h et 24 h : la serie se construit PAR CUMUL, un jour saute est un trou definitif. Ajouter une entree par jour, puis lancer scripts/report_crawlers_ia.py. ATTENTION DE METHODE : ces requetes ne sont PAS dans nos visites beacon, les robots n'executant pas notre JavaScript. Ne jamais les soustraire de l'audience mesuree. AUTOMATISE le 05/08 : le Worker compte desormais les robots dans qp_events, lisible par scripts/run_report_local.ps1 -Since 1d. Ce fichier ne sert plus qu'aux releves MANUELS du tableau de bord, qui restent utiles une fois par semaine pour verifier qu'aucun robot n'est bloque et que Managed robots.txt est desactive.",
 "releves": [
  {
   "date": "2026-08-05",
   "fenetre": "24 h glissantes, relevees le 05/08/2026 vers 12h (UTC+2)",
   "source": "dash.cloudflare.com > quelleplateforme.fr > AI Crawl Control, pages Overview et Security, releve a l'ecran",
   "total_requetes_ia": 164,
   "variation_pct_vs_periode_precedente": 7.2,
   "reponses_200": 146,
   "requetes_bloquees": 0,
   "chemin_le_plus_crawle": {
    "chemin": "/sitemap.xml",
    "requetes_reussies": 12
   },
   "par_crawler": {
    "BingBot": {
     "editeur": "Microsoft",
     "categorie": "moteur",
     "requetes": 93,
     "octets": 679350
    },
    "ClaudeBot": {
     "editeur": "Anthropic",
     "categorie": "robot IA",
     "requetes": 23,
     "octets": 1440000
    },
    "OAI-SearchBot": {
     "editeur": "OpenAI",
     "categorie": "recherche IA",
     "requetes": 21,
     "octets": 151010
    },
    "ChatGPT-User": {
     "editeur": "OpenAI",
     "categorie": "assistant IA",
     "requetes": 18,
     "octets": 149960
    },
    "Googlebot": {
     "editeur": "Google",
     "categorie": "moteur",
     "requetes": 5,
     "octets": 39160
    },
    "Amazonbot": {
     "editeur": "Amazon",
     "categorie": "robot IA",
     "requetes": 2,
     "octets": 11470
    },
    "Claude-User": {
     "editeur": "Anthropic",
     "categorie": "robot IA",
     "requetes": 1,
     "octets": 8100
    },
    "GPTBot": {
     "editeur": "OpenAI",
     "categorie": "robot IA",
     "requetes": 1,
     "octets": 990
    }
   },
   "absents": [
    "PerplexityBot",
    "Perplexity-User",
    "MistralAI-User",
    "CCBot",
    "archive.org_bot",
    "Applebot",
    "DuckAssistBot",
    "Meta-ExternalAgent",
    "Meta-ExternalFetcher",
    "FacebookBot",
    "Bytespider",
    "TikTok Spider",
    "PetalBot",
    "Baidu",
    "Claude-SearchBot",
    "Google-CloudVertexBot",
    "Anchor Browser",
    "Manus Bot",
    "Novellum AI Crawl",
    "ProRataInc",
    "Terracotta Bot",
    "Timpibot",
    "Arquivo Web Crawler",
    "Cloudflare Crawler"
   ],
   "reglages": {
    "managed_robots_txt": "desactive (a laisser ainsi : active, il declarerait que notre contenu ne doit pas servir a l'entrainement des IA)",
    "markdown_for_agents": "indisponible (plan Pro requis)",
    "crawlers_bloques": "aucun"
   },
   "contexte_serveur_meme_journee": {
    "requetes_http_totales": 1630,
    "visiteurs_uniques_cloudflare": 361,
    "attaques_bloquees": 115,
    "source": "Cloudflare > Analytics > HTTP Traffic, fenetre Previous 24 hours"
   },
   "auto_tests_a_deduire": "2 requetes ClaudeBot forgees le 05/08 pour valider la chaine de comptage (une sur /sitemap.xml, une sur /plateformes/indy.html). A deduire du premier releve du comptage serveur, au meme titre que les auto-tests de clics sortants."
  },
  {
   "date": "2026-08-10",
   "fenetre": "Last 24 hours (UTC+2), relevee le 10/08/2026 vers 8h40",
   "source": "dash.cloudflare.com > quelleplateforme.fr > AI Crawl Control > Overview, releve a l'ecran",
   "total_requetes_ia": 477,
   "variation_pct_vs_periode_precedente": 363.11,
   "reponses_200": 392,
   "requetes_bloquees": 0,
   "requetes_autorisees": 477,
   "chemin_le_plus_crawle": {
    "chemin": "/",
    "requetes_reussies": 14
   },
   "granularite": "Cloudflare regroupe DESORMAIS par editeur, pas par user-agent (badges +1/+2 non deplies). Les chiffres ci-dessous sont donc des totaux par editeur, pas par robot.",
   "reglages": {
    "managed_robots_txt": "desactive (verifie a l'ecran, a laisser ainsi)",
    "markdown_for_agents": "indisponible (plan Pro requis)",
    "crawlers_bloques": "aucun (477 requetes, 477 autorisees, 0 echec)"
   },
   "comptage_worker_meme_fenetre": {
    "total": 473,
    "PerplexityBot": 241,
    "Googlebot": 117,
    "BingBot": 56,
    "autre-robot": 41,
    "ChatGPT-User": 10,
    "OAI-SearchBot": 4,
    "Bytespider": 2,
    "GPTBot": 1,
    "Meta-ExternalAgent": 1,
    "note": "Ecart normal avec Cloudflare : nos comptes sont un plancher (cache de peripherie) et les deux fenetres de 24 h ne demarrent pas a la meme minute. Les deux sources s'accordent sur le fait marquant : Perplexity passe premier."
   },
   "fait_marquant": "PerplexityBot passe de 3 requetes sur 48 h (09/08) a 239 sur 24 h et devient le premier lecteur du site, devant Googlebot. Balayage complet cote Worker : 55 fiches, 53 guides, 32 comparatifs, 18 pages metier. ClaudeBot, premier lecteur au 05/08, tombe a 0 sur la fenetre.",
   "absents": [
    "Perplexity-User",
    "MistralAI-User",
    "CCBot",
    "archive.org_bot",
    "Applebot",
    "DuckAssistBot",
    "Meta-ExternalFetcher",
    "FacebookBot",
    "TikTok Spider",
    "PetalBot",
    "Baidu",
    "Claude-SearchBot",
    "Google-CloudVertexBot",
    "Anchor Browser",
    "Manus Bot",
    "Novellum AI Crawl",
    "ProRataInc",
    "Terracotta Bot",
    "Timpibot",
    "Arquivo Web Crawler",
    "Cloudflare Crawler"
   ],
   "par_crawler": {
    "PerplexityBot": {
     "editeur": "Perplexity",
     "categorie": "recherche IA",
     "requetes": 239,
     "octets": null,
     "variation_pct": 23800.0,
     "_agrege": "total editeur, user-agents non deplies par Cloudflare"
    },
    "Googlebot": {
     "editeur": "Google",
     "categorie": "moteur",
     "requetes": 168,
     "octets": null,
     "variation_pct": 572.0,
     "_agrege": "total editeur, user-agents non deplies par Cloudflare"
    },
    "BingBot": {
     "editeur": "Microsoft",
     "categorie": "moteur",
     "requetes": 58,
     "octets": null,
     "variation_pct": -4.92,
     "_agrege": "total editeur, user-agents non deplies par Cloudflare"
    },
    "ChatGPT-User": {
     "editeur": "OpenAI",
     "categorie": "assistant IA",
     "requetes": 11,
     "octets": null,
     "variation_pct": -21.43,
     "_agrege": "total editeur, user-agents non deplies par Cloudflare"
    },
    "Meta-ExternalAgent": {
     "editeur": "Meta",
     "categorie": "robot IA",
     "requetes": 1,
     "octets": null,
     "variation_pct": null,
     "_agrege": "total editeur, user-agents non deplies par Cloudflare"
    },
    "ClaudeBot": {
     "editeur": "Anthropic",
     "categorie": "robot IA",
     "requetes": 0,
     "octets": null,
     "variation_pct": null,
     "_agrege": "total editeur, user-agents non deplies par Cloudflare"
    },
    "Applebot": {
     "editeur": "Apple",
     "categorie": "robot IA",
     "requetes": 0,
     "octets": null,
     "variation_pct": null,
     "_agrege": "total editeur, user-agents non deplies par Cloudflare"
    },
    "Bytespider": {
     "editeur": "ByteDance",
     "categorie": "robot IA",
     "requetes": 0,
     "octets": null,
     "variation_pct": null,
     "_agrege": "total editeur, user-agents non deplies par Cloudflare"
    },
    "CCBot": {
     "editeur": "Common Crawl",
     "categorie": "robot IA",
     "requetes": 0,
     "octets": null,
     "variation_pct": null,
     "_agrege": "total editeur, user-agents non deplies par Cloudflare"
    },
    "DuckAssistBot": {
     "editeur": "DuckDuckGo",
     "categorie": "recherche IA",
     "requetes": 0,
     "octets": null,
     "variation_pct": null,
     "_agrege": "total editeur, user-agents non deplies par Cloudflare"
    }
   }
  }
 ]
}
