Lorsque vous procédez à l'audit de votre site avec Audit de site, nous envoyons un robot d'exploration inspecter les pages que vous lui indiquez dans la configuration de l'outil.
Cependant, il est possible de rencontrer des problèmes en lien avec l'exploration tels que :
- Le robot d'exploration parcourt le site trop rapidement et fait temporairement planter le site ou le ralentit pour les utilisateurs.
- Le robot d'exploration parcourt le site trop rapidement et, en conséquence, les pages ne se chargent pas correctement. Semrush présente alors des "faux positifs", c'est-à-dire qu'il signale dans les résultats de votre audit des problèmes qui n'auraient pas été signalés si l'audit avait effectué son exploration à un rythme plus lent, sans que le site ne plante.
- Le robot d'exploration met trop de temps à explorer le site et vous attendez trop longtemps pour obtenir vos résultats.
Accélérer Audit de site
Si votre audit de site est trop lent dans son exploration, vous pouvez l'accélérer dans Paramètres du robot d'exploration de la fenêtre de configuration.
Pour accélérer Audit de site, choisissez “délai minimum entre les pages” pour explorer le site le plus vite possible.
Cette action permettra à notre robot d'ignorer toute instruction de retardement de l'exploration (crawl-delay) dans le fichier robots.txt du site et de le parcourir le plus rapidement possible.
Si vous n'êtes toujours pas satisfait de la vitesse de votre exploration, l'autre mesure que vous pouvez prendre consiste à faire en sorte que vos pages se chargent plus rapidement. Lorsque les pages se chargent lentement, cela ralentit l'exploration.
N'oubliez pas que si un robot explore votre site à une vitesse très élevée, les utilisateurs du site risquent de devoir supporter des temps de chargement plus lents.
Dans certains cas, il serait donc judicieux de ralentir votre exploration plutôt que de l'accélérer.
Ralentir Audit de site
Si votre audit de site est trop rapide, il peut faire planter temporairement le site ou le ralentir pour les utilisateurs, et présenter des résultats faussement positifs. Ralentissez la vitesse d'exploration pour vous assurer que vos résultats sont représentatifs de l'expérience d'un utilisateur sur le site.
Pour ralentir votre audit, vous disposez de plusieurs options dans vos paramètres de configuration:
- Dites à Semrush d'explorer 1 URL toutes les 2 secondes. Cela permet de s'assurer que l'exploration ne surcharge pas le serveur de votre site avec une abondance d'activité en un court laps de temps.
- Définissez un délai d'exploration personnalisé dans le fichier robots.txt de votre site web. Si vous choisissez l'option "Respecter robots.txt" dans les étapes de configuration, notre robot ne pourra explorer les pages qu'à la vitesse que vous lui indiquerez.
Par exemple, si vous ajoutez "Crawl-delay : 5" à votre fichier robots.txt, il sera indiqué au robot d'attendre 5 secondes avant d'accéder au site pour consulter une autre page. Là encore, cela permettra de s'assurer que l'exploration se déroule à un rythme qui ne fera pas planter ou ralentir le site web (voir ci-dessous).User-agent: SemrushBot Crawl-delay: 5 User-agent: SiteAuditBot Crawl-delay: 5
Veuillez noter que le délai d'exploration maximum que nous pouvons appliquer est de 30, donc tout ce qui est au-delà de 30 sera égal à 30 pour notre bot.
Si vous rencontrez toujours des problèmes lors de votre audit de site, jetez un œil à notre guide de dépannage ou contactez notre équipe d'assistance à la clientèle.
Retour à Les boîtes à outils Semrush catégorie