La nouvelle base de données de backlinks Semrush : Bigger, Better, Faster

Elena Terenteva

juil. 03, 20194 min de lecture
La nouvelle base de données de backlinks Semrush : Bigger, Better, Faster

L’outil Analyse de backlinks est une des plus anciennes fonctionnalités développées par SEMrush…et il méritait justement une totale remise à niveau pour rester à la hauteur des performances de notre boîte à outils SEO.

Il y a un an et demi, nous nous sommes donné pour objectif de fixer la barre encore plus haut, pour vous aider à optimiser votre link building de la meilleure des façons. 

SEMrush est une boîte à outils complète dédiée aux professionnels du marketing digital, particulièrement performante en matière de SEO. Aider les professionnels à générer du trafic organique depuis les moteurs de recherche vers leurs contenus est depuis toujours notre objectif principal. Il nous a amenés à développer une suite SEO de renommée mondiale, qui remporte chaque année de nombreuses distinctions.

semrush-awards-2019

Le SEO est une affaire délicate : les critères évoluent, sont complexes et souvent étroitement liés. Pour obtenir les meilleurs classements, de nombreuses étapes sont nécessaires, on-site comme off-site. C’est justement tout au long de ce processus sinueux que nous fournissons à nos utilisateurs les meilleures solutions.

Et pour rester au top, nous travaillons en permanence à l’amélioration de nos outils. Nous sommes d’ailleurs fiers de partager avec vous notre dernier succès !

Backlinks SEMrush

Conscients que la qualité de notre base de données de backlinks nécessitait d’être améliorée, nous avons procédé à la refonte totale de notre processus de collecte de données. Pour atteindre ce but, nous avons suspendu le développement de toutes les autres fonctionnalités de backlink, et avons dressé la liste de tous les éléments qui permettraient de perfectionner la base de backlinks mise à disposition de nos clients.

Liste en mains, il n’y avait plus qu’à s’y mettre, jusqu’à ce que toutes les cases soient cochées.

La refonte de notre base de données

Inutile de vous embarrasser de détails techniques relatifs à la refonte de notre base de données de backlinks… Voici donc un bref aperçu de notre feuille de route :

Crawler

Après avoir étudié avec soin les inconvénients et les limites de l’architecture existante, nous avons décidé de reprogrammer entièrement notre crawler, en repartant de zéro, à partir d’une approche complètement différente de collecte de données. 

File d’attente

Les premiers tests de notre nouveau robot crawler, et leurs files d’URL en attente, nous ont révélé que nous n’arrivions pas encore à traiter correctement la quantité de données collectées. Première solution : augmenter tout simplement nos capacités matérielles. Mais cela n’a pas été suffisant. Nous avons alors développé une file d’attente plus efficace.

Seeding

Pour fournir à notre crawler une liste initiale de qualité, nous avons mis en file d’attente toutes les URL du top 100 de Google pour 450 millions de mots-clés issus de notre outil Recherche organique. Une garantie de pertinence de notre base de données. 

Stockage

Augmentation de la collecte de données signifie forcément élévation de leur espace de stockage. Nous avons dû quadrupler la taille de notre serveur.

L’évaluation de notre progression

Pour évaluer exactement notre performance en tant que fournisseurs de backlinks, nous avons décidé de nous mesurer aux meilleurs : Majestic, Ahrefs et Moz. 

Avant de vous présenter la méthodologie appliquée, voici les résultats obtenus au cours des six derniers mois. La comparaison avec les outils SEO leaders sur le marché nous confirme que nous avons fait un pas de géant.

SEMrush backlinks Mai 2019

SEMrush backlinks october 2018

Comment avons-nous comparé nos résultats ? 

Trouver une méthodologie à la fois claire et objective n’a pas été une mince affaire. Vous trouverez toujours des domaines qui montreront votre outil de backlink sous son meilleur profil ! C’est pourquoi nous avons décidé d’utiliser chaque mois un ensemble aléatoire de 100 domaines (choisis sur 100 000), afin de d’analyser les performances de nos concurrents au cours des 6 derniers mois.

Chaque fois, nous avons observé le nombre de domaines de référence et le nombre total de backlinks de chaque concurrent, sur les 100 domaines. Nous avons aussi, pour chaque domaine de notre échantillon test, comparé les résultats de SEMrush à ceux des autres : un rapport inférieur à 1 signifie que la base SEMrush dispose de moins d’informations sur le site testé ; un rapport supérieur à 1 indique dans quelle mesure le résultat de SEMrush est supérieur.

Enfin, pour obtenir un score final, nous avons fait la médiane de tous ces indicateurs.

SEMrush concurrents

Conclusion

Les résultats obtenus par notre nouvelle base de données constituent pour nous une véritable réussite. Mais ce ne sont que des chiffres, n’oublions pas que quantité de données ne rime pas forcément avec qualité. C’est pourquoi nous redoublons d’efforts pour maintenir notre base de données utile et à jour. 

Prochaine étape : nous servir de ce nouveau processus de collecte pour concevoir de nouvelles fonctionnalités et capacités, afin de rendre nos outils encore plus puissants. Restez à l’écoute pour découvrir la suite !

Faites-vous une idée par vous-même et testez notre Analyse de Backlinks ; vos retours et commentaires sont les bienvenus !

Partager
Author Photo
Elena Terenteva, Product Marketing Manager at Semrush. Elena has eight years public relations and journalism experience, working as a broadcasting journalist, PR/Content manager for IT and finance companies. Bookworm, poker player, good swimmer.