La redirection 301 et le petit robots.txt sont dans un bateau…

La multiplication des *digg-like*, des agrégateurs et autres aspirateurs de contenus nécessite une vigilance accrue quant aux redirections qui affectent les liens pointant vers nos blogs et nos sites web. A cause de Wikio, il faudra non seulement vérifier les redirections, mais aussi les fichiers robots.txt. Magneto !

### Petits rappels concernant les redirections 301 ou 302

Contrairement à ce qu’on lit parfois sur les conséquences de l’utilisation des redirections 301 ou 302, une redirection permanente vers votre contenu n’est pas un problème : elle indique que la page de destination (la vôtre) est bien la page que les moteurs de recherche devront continuer d’indexer : c’est la page « officielle » pour le contenu associé. En revanche, les redirections 302 temporaires indiquent que la page de destination (toujours la vôtre) est là de manière temporaire : la page qui pointe vers elle est vue comme la page officielle par les moteurs de recherche.

Petit rappel Ottorisé :

> Redirection 301 : Page web déplacée de façon permanente. Pas de soucis.

> Redirection 302 : Page web déplacée de façon temporaire. Une redirection 302 entraine que la page du site qui fait la redirection remplace la page d’origine aux yeux des moteurs de recherche.

### Comment voir les redirections ?

Vous l’aurez certainement remarqué, les redirections 302 sont un fléau difficile à contrer : n’importe qui peut faire une redirection 302 sur l’une de vos pages pour prendre votre place dans les SERP. Dans ce contexte, il est important de connaitre les outils pour visualiser les en-têtes HTTP pour surveiller les annuaires, les agrégateurs, et d’une manière générale tout ceux qui vous veulent du bien 😉

#### Voici quelques outils :

* Webmaster Hub,
* Web Rank Info,
* Yagoort — propose la liste des codes de retour ainsi que de nombreux autres outils.

### La redirection 301 tombe à l’eau. Qu’est-ce qu’il reste ? (le petit robots.txt)

Bien. Vous avez fait quelques tests et les liens qui pointent vers votre site sont bien des redirections 301 permanentes. Tout va bien ? Pas si sûr : j’apprends via le twitter d’Otto que *Wikio*, par exemple, utilise un fichier `robots.txt` qui interdit à tous les moteurs de suivre certains liens. Par exemple, l’adresse :

http://www.wikio.fr/webinfo?id=67435763

qui renvoie les en-têtes HTTP…

HTTP/1.1 301 Moved Permanently
Location: http://www.css4design.com/css4design-vs-google-petite-histoire-du-positionnement-sur-le-mot-cle-css

… devrait me garantir une visite de courtoisie de la part des moteurs de recherche. Or, le fichier robots.txt de Wikio précise :

User-agent: *

Disallow: /webinfo

… ce qui indique aux moteurs de recherche de ne pas suivre cette adresse.

Pour quel motif ? La seule (mauvaise) raison qui me vient à l’esprit, c’est de garder le *Google Juice* pour eux tout seul pour passer devant les blogs dans les SERP !

### Conclusion provisoire

1. Wikio s’est déjà fait épinglé par Otto pour cause de redirections 302 sauvages,
2. Wikio s’est déjà fait épinglé par Aymeric pour cause de scraping de contenu,
3. Wikio se fait épinglé pour cause de fichier robots.txt antisocial,

Suite à la vigilance d’Otto, la redirection 302 avait été transformée en redirection 301. J’espère que les lignes scélérates du robots.txt seront supprimées rapidement et qu’en prime, pour se faire pardonner, Wikio accèdera à la demande générale d’avoir de vrais liens retour vers la source des contenus qui fait sa valeur, comme le suggère Aymeric.

Note : Je précise qu’il n’est pas dans mes intentions de faire du *Wikio bashing* gratuitement. Je suis convaincu que Wikio a sa place dans le paysage blogosphérique français, mais pas à n’importe quel prix.

scoopeo_url=’http://www.css4design.com/la-redirection-301-et-le-petit-robots-txt-sont-dans-un-bateau’