Accueil
Glossaire

Crawl

2 min de lecture 3 définitions liées dans ce texte
Crawl

Un crawl (ou exploration) est le processus par lequel les moteurs de recherche parcourent le web en suivant les liens entre les pages pour découvrir de nouveaux contenus et les ajouter à leur index. Les robots d'exploration (ou crawlers) des moteurs de recherche parcourent le web en suivant les liens entre les pages pour trouver de nouveaux contenus. Lorsqu'un robot d'exploration trouve une page, il analyse son contenu et suit les liens sur cette page pour découvrir d'autres pages. Ces pages sont ensuite analysées et ajoutées à l'index du moteur de recherche.

Les crawlers des moteurs de recherche suivent les liens entre les pages pour découvrir de nouveaux contenus, ils peuvent également suivre les instructions de fichiers comme les Sitemaps et robots.txt pour accéder aux pages. Les moteurs de recherche effectuent des crawl régulièrement pour s'assurer que leurs index sont à jour.

Il est important pour les propriétaires de sites web de s'assurer que leur site est bien structuré pour faciliter les crawl des moteurs de recherche. Il est également important de s'assurer que les pages importantes sont accessibles aux robots d'exploration en utilisant des fichiers tels que Sitemaps et robots.txt, et de résoudre les erreurs d'exploration potentielles en utilisant des outils tels que Google Search Console.

Partager cette définition

Autres définitions en "C"

C'est la 1ère fois que j'écris un avis sur Internet. Jonathan m'a tout simplement sauvé la vie avec mon client. Je suis passé par 2 développeurs avant lui qui n'arrivaient pas à répondre à mon besoin pendant plusieurs semaines. Il aura fallu 1 jour à Jonathan pour me résoudre mon problème.

MarkezDiyeva

Pour aller plus loin