Aller au contenu

Comment vérifier si une IP correspond à Googlebot dans Google Sheets ?

Antoine Brisset
Antoine Brisset
Temps de lecture : 2 min
Comment vérifier si une IP correspond à Googlebot dans Google Sheets ?
Photo by Alexander London / Unsplash

Table des matières

Si tu as déjà fait de l'analyse de logs, tu sais qu'un simple filtre sur le user agent Googlebot ne suffit pas à valider que le crawl provient bien d'un "véritable" Googlebot.

Il faut procéder à une deuxième vérification, qui peut se faire de deux manières :

Bon, admettons que le seul outil que tu aies sous la main soit un tableur.

Et que ce tableur soit Google Sheets.

Comment faire cette vérification ?

  • 1ère option (reverse DNS) : ça me parait compliqué sans mettre les mains un minimum dans le code (Apps Script).
  • 2ème option (liste des adresses IP) : hummm, c'est jouable.

1ère piste : la liste des adresses IP publiée par Google

La liste des adresses IP communiquée par Google est au format JSON.

On peut donc tout-à-fait imaginer importer cette liste dans Google Sheets avec la fonction IMPORTDATA.

Puis nettoyer les données pour afficher uniquement les IP.

=ARRAYFORMULA(REGEXREPLACE(QUERY(SPLIT(IMPORTDATA("https://developers.google.com/static/search/apis/ipranges/googlebot.json";",");""": """;FALSE);"SELECT Col2 OFFSET 3");":?:?\/\d{2}""}";""))
Import des adresses IP

Mais il y a un problème.

Le problème, c'est que les adresses qui figurent dans le fichier contiennent le masque de sous-réseau (ou subnet).

{"ipv4Prefix": "66.249.71.160/27"}
Ici le "subnet" est /27

Ce qui oblige donc à passer par un calcul intermédiaire pour avoir l'ensemble des ranges d'IP.

La nomenclature 66.249.71.160/27, par exemple, peut être ici traduite par : "toutes les IPs comprises entre 66.249.71.161 et 66.249.71.190".

On peut sûrement faire plus simple, non ?

2ème piste : une API

En cherchant un peu sur Google, je suis tombé sur cette API qui permet de tester si une IP est utilisée par Googlebot : https://seoapi.com/googlebot/.

Avant de te la recommander dans cette newsletter, j'ai fait un test sur un échantillon d'IPs, en croisant les résultats qu'elle propose avec ceux d'un reverse DNS. Test concluant !

Ce qui est cool, en plus, c'est qu'elle propose un mode simplifié pour une utilisation sans douleur dans Google Sheets.

Bref. Comment l'utiliser ?

Il suffit d'entrer la formule ci-dessous pour savoir si l'IP est valide ou non (remplace A2 par la référence de ta cellule).

=IMPORTDATA("https://googlebot.seoapi.com/v1/validate/?ip="&A2&"&compact=1")
Vérification des IP avec l'API

L'inconvénient, une fois de plus, c'est que la fonction IMPORTDATA est bridée. Ça fonctionnera sur plusieurs dizaines de lignes, mais pas au-delà.

La bonne nouvelle, c'est que j'ai développé un nouvel outil dans Gadgeto qui permet de casser cette limite.

Et il est déjà dispo dans le template 😉

Google Sheets

Antoine Brisset Twitter

Consultant SEO depuis 2010. Je traque les clics inutiles et automatise les tâches répétitives pour gagner du temps dans mon quotidien de travailleur du web.

Commentaires


Articles Similaires

Membres Public

Des variables dans les formules Google Sheets (enfin !)

Le mois dernier, Google a ajouté 11 nouvelles fonctions dans Google Sheets. Tu peux retrouver tout ça en détail ici. Parmi ces nouveautés, celle que j'ai le plus vite intégrée dans mon quotidien est sans hésiter LET. La fonction LET permet en effet de créer des variables à l'intérieur d'une

Des variables dans les formules Google Sheets (enfin !)
Membres Public

Comment calculer la similarité de 2 textes avec Google Sheets ?

Aujourd'hui, on se plonge à nouveau dans Google Sheets avec un tuto rapide pour te montrer comment mesurer la similarité entre 2 contenus. Choix de la métrique : l'indice de Jaccard Il existe énormément de façons de mesurer un taux de similarité entre deux textes : distance de Levenshtein, indice de Dice,

Comment calculer la similarité de 2 textes avec Google Sheets ?
Membres Public

Comment (bien) compter le nombre de mots dans un texte avec Google Sheets ?

Compter le nombre de mots dans un texte est une tâche récurrente en SEO. Pourtant, elle n'est pas aussi triviale qu'il n'y paraît. Je te montre aujourd'hui comment faire avec Google Sheets. Méthodes Il existe plusieurs façons de faire. Je vais t'en présenter deux : * méthode 1️⃣ : compter le nombre d'espaces

Comment (bien) compter le nombre de mots dans un texte avec Google Sheets ?