SEO
Crawling
Aussi : crawl · robot d’indexation
En clair
Un robot (Googlebot, par exemple) parcourt le web comme un visiteur ultra-rapide : il suit des liens, lit des fichiers d’aide, revient sur des pages déjà vues. Ce parcours s’appelle le crawling. Sans crawl, une page nouvelle ou mise à jour reste invisible pour le moteur, même si elle est en ligne pour les humains.
Concrètement
Vous publiez une nouvelle page : si aucun lien interne n’y mène et qu’elle n’est pas dans le sitemap, le robot peut mettre longtemps à la trouver.
Pourquoi ça compte
Un site lent, mal lié ou bloqué peut être mal exploré : pages orphelines, budget de crawl gaspillé sur des doublons. Le crawl découvre ; il ne garantit ni l’indexation ni le classement. C’est la première porte.
Définition technique
Exploration automatisée des URLs par un robot (Googlebot, etc.) pour découvrir et mettre à jour l’index.
À ne pas confondre avec
- Indexation — Crawler = découvrir ; indexer = retenir dans l’index pour pouvoir ranker.
Termes liés
Vu dans ces articles
- Des piliers du SEO aux piliers du GEO : ce qui change vraiment17 septembre 2026
- Le coût caché de la visibilité dans les moteurs IA16 septembre 2026
- llms.txt : beaucoup de sites l’utilisent encore mal14 septembre 2026
- Optimiser pour les IA : la boîte à outils grossit, la preuve de résultat non31 août 2026
- SEO, IA, agents : ce qu’un site doit vraiment montrer aux machines en 202624 août 2026