Ce sujet a été abordé lors du Google Webmaster Central Hangout le 18 octobr dernier. Voici la question qui a été soumise :
Je voudrais savoir si Google vérifie les codes d'état avant toute autre chose, comme avant de rendre le contenu ?
En réponse, Mueller a confirmé que c'est exact. Google vérifie les codes d'état avant de rendre ou d'indexer le contenu.
Plus précisément, Google vérifiera un code d'état «200» (succès de la requête) avant de procéder à l’exploration plus loin.
Un code de statut 200 OK indique à Google qu'il est en train de visiter une page valide et il pourrait y avoir du contenu qui vaut la peine d'être indexé.
D'autre part, si Google rencontre une erreur 400 ou 500, ou une redirection 301 ou 302, alors il ne procéderait pas au rendu du contenu pour l'indexation.
John Mueller souligne spécifiquement que Google ne voit pas les pages avec une erreur 404. Donc, si vous concevez une page 404 personnalisée pour votre site, gardez à l'esprit que seuls les visiteurs humains finiront par la voir. Pas Google.
Par défaut, Google ne rend rien, à moins qu'il ne retourne un code d’état 200 OK. Voici la réponse complète de Mueller dans la vidéo (26:38) ci-dessous :
Oui, nous vérifions les codes d'état avant d'indexer le contenu ou de le rendre.
En particulier, si c'est un code d’état 200, alors c'est comme un signe qu'il y a quelque chose ici que nous pourrions être en mesure d'indexer. S'il s'agit d'une erreur de 400 ou 500, ou d'une redirection, alors évidemment ce sont des choses que nous ne rendrons pas.
Donc, si vous avez une très belle page 404, alors ce n'est pas quelque chose que nous verrions pour l'indexation. De même, si votre page retourne 404 par défaut ... eh bien si elle retourne 404, alors nous ne rendons rien là, de toute façon. Donc, elle devrait retourner 200.
Source
