Comment pousser Google à crawler vos sitemaps ?

Si vous êtes SEO, vous savez que les sitemaps XML sont importants pour le crawl et l’indexation de vos pages. Il existe plusieurs enjeux majeurs à travers les sitemaps XML :

  1. Les urls poussées dans les sitemaps doivent regroupées vos pages importantes d’un point de vue SEO (d’ailleurs je vous recommande l’article pour créer un sitemap en python)
  2. Vos sitemaps doivent être fréquemment mis à jour (quotidiennement pour les sites E-commerce par exemple).
  3. Vos sitemaps doivent être déclarés dans la GSC (Google Search Console) pour notamment évaluer le niveau d’indexation des urls envoyées.

Au delà de ces 3 points, il en existe un pour lequel les SEO n’ont pas la main : Celui de la fréquence de crawl de Google sur vos sitemaps.

Et bien j’ai une bonne nouvelle, il est possible d’inciter Google à venir crawler vos sitemaps à la demande, et ce en quelques lignes de code.

Il ne vous restera plus qu’à l’automatiser via un cron sur votre machine.

Voici le code Python 🔥

import urllib.request
from bs4 import BeautifulSoup
 
try:
    url = "http://www.google.com/ping?sitemap=https://www.example.com/sitemap.xml"
    response = urllib.request.urlopen(url)
    soup = BeautifulSoup(response.read(), "html.parser")
    print(soup.find("h2").text)
     
except Exception as e:
    print(e)

Une fois le script lancé, vous pouvez vérifier la date de crawl de Google dans la GSC (sitemap). C’est magique, elle est à jour !

Dernière étape, il ne vous restera plus qu’à automatiser le script via un cron sur votre machine pour le faire tourner périodiquement selon vos besoins.

0 commentaires

Soumettre un commentaire

Votre adresse de messagerie ne sera pas publiée. Les champs obligatoires sont indiqués avec *

Découvrez aussi …

Qu’est-ce le SEO et comment fonctionne t-il ?

Qu’est-ce le SEO et comment fonctionne t-il ?

Vous souhaitez comprendre ce qu'est le SEO et son fonctionnement ? Bonne nouvelle, vous êtes au bon endroit. Nous vous avons concocté un guide simple, concis et efficace pour mieux appréhender le SEO et ses enjeux.L'une des questions les plus fréquentes parmi nos...

10 principes UX à connaître

10 principes UX à connaître

L'UX au service de votre site web Créer un site web n'est pas chose aisée. Cela exige un parfaite compréhension et analyse de la cible. Selon vous serez amener à adapter la navigation, le style ou encore le wording de votre site. Cependant, certaines règles restent...

How to create XML Sitemap with R

How to create XML Sitemap with R

XML sitemaps are must have when you want to make sure Google crawl your pages. To create XML sitemaps, it exists multiple free and paid solutions. Well, this article will show you how to create XML sitemaps for free with a simple R script. This method does not need to...

Créer un sitemap XML avec Python

Créer un sitemap XML avec Python

Qu'est-ce qu'un sitemap XML ? Un sitemap XML est un fichier qui vise à lister l'ensemble de vos urls importantes pour le SEO. Vous pouvez en créer plusieurs par thématique ou type de pages. Il existe certaines limitations concernant les sitemaps XML. Pour rappel, les...