Catégories
BASH

Extraire IP de Googlebot et autres bots

C’est un sujet de rigueur en ce moment, notamment avec la venue de GooglePreview (vous savez l’aperçu de votre site web dans les SERP). Pour les gentils White Hat, cela n’a aucune incidence, par contre pour ceux qui s’adonnent au cloacking, certains ont une preview normal et d’autres une preview qui ne prend pas en […]

Catégories
Referencement

Robots.txt, ce qu’il faut eviter

On ne vous l’a surement pas assez dit, mais en bon SEO que vous êtes, le fichier robots.txt DOIT figurer à la racine de votre/vos site(s) internet. Certains d’entre vous me diront : « Oui on le sait, mais de toutes façon ça marche très bien sans ». Et je vais vour répondre : « Oui certes, mais […]