Screaming Frog
Screaming Frog désigne ici la suite logicielle de Screaming Frog (UK) au-delà du SEO Spider classique : Log File Analyser pour analyser les logs serveur Googlebot, et le mode CLI / scheduled du SEO Spider pour automatiser des audits récurrents. Le Log File Analyser ingère les logs Apache / Nginx / IIS, identifie les bots (Googlebot, Bingbot, IA crawlers), repère les pages crawlées vs ignorées, calcule la fréquence de crawl par segment. Mode automatisation du SEO Spider : crawls programmés via Task Scheduler (Windows) ou cron (Mac/Linux), exports automatisés vers Google Sheets ou local. Plan payant 199 GBP/an chacun.
- #logs
- #automation
- #crawl budget
- #scheduled
Avantages clés
- Log File Analyser pour visualiser le comportement Googlebot
- Détecte les bots IA dans les logs (OpenAI, Anthropic, Perplexity)
- Mode CLI du SEO Spider pour crawls automatisés
- Exports programmés vers Google Sheets ou local
- 199 GBP/an chacun, license desktop perpétuelle
Suite logicielle Screaming Frog : Log Analyser et CLI
Au-delà du SEO Spider classique (crawler GUI desktop), l'éditeur Screaming Frog propose le Log File Analyser : un outil desktop dédié à l'analyse des logs serveur. On uploade les fichiers d'access logs, l'app détecte les bots, segmente par status code, fréquence de visite, profondeur d'URL. Pour un site à fort volume où le SEO Spider en mode crawl ne suffit pas, c'est le complément qui montre le comportement réel de Googlebot.
Le mode CLI du SEO Spider permet de scheduler des crawls automatisés : un cron lance un audit chaque lundi à 6h, exporte le rapport CSV dans un dossier surveillé, qu'un Zap ou Make ramasse pour push dans Slack ou Looker Studio. Pour une agence qui surveille la santé technique de plusieurs comptes clients, c'est l'option la plus directe (vs Sitebulb Cloud ou Ryte qui demandent un abonnement entreprise plus cher). Tarification : 199 GBP/an pour SEO Spider, idem pour Log File Analyser.