Google indexe malgré les 403 Forbidden !?!

[Christophe]

Encore un beau coup de Google!

En cours de migration, le forum était en Deny From All (= Interdiction totale) sauf certaines IP (Allow from...) durant la configuration / migration...donc en théorie...impossible d'y accéder sans les IP autorisées...

La levée de l'interdiction a été faite ce soir vers 18h...c'est à dire il a 5h environ!
Or Google avait déjà indexé une partie du site il a 14h d'après cette capture...

Franchement ils sont "forts"...en gros Google fait ce qu'il veut et il passe par n'importe quelle petite porte pour indexer un site qui ne le voulait pas?

Alors ceux qui croient encore que les fichier robots.txt sont utiles feraient mieux de changer de métier AMHA!
De toute façon plus personne ne comprend plus rien à google...les "experts SEO" sont tous à la rue! On parie?

[chatelot16]

gogol est fort !

je l'utilise pour chercher un tas de chose et il trouve souvent des reponse sur des site completement fermé , pas accessible de façon normale , mais accessible uniquement par la recherche google

[Christophe]

Bin oui ce nouveau forum est déjà en cache...à 18h45 heure de google alors que j'ai du lever l'interdiction à 18h15 - 18h30 !

Preuve que le travail avait déjà été commencé par Google! Google ne met pas un site en cache en 15 minutes!

[chatelot16]

tu ne va pas t'en plaindre , plus il est connu de gogol plus il sera consulté !

quand on trouve un sujet sur l'ancien forum , il ne suffit pas de changer le debut de l'url pour que ça marche sur le nouveau : phpbb a changé sa façon de faire ... mais je suis sur que chez gogol il savent traduire les url de phpbb2 en phpbb3.1

c'est aussi pour ça qu'il est utile de laisser en ligne l'ancien et le nouveau forum : ça permet de voir un peu comment ça marche

[Christophe]

Bien sur in fine cela me dérange pas! Mais quand tu travailles sur un projet et que tu mets des porte de sécurité pour que cela ne soit pas indexé et que cela l'est plus tôt que tu veux...Bin c'est dérangeant quand même!

Non le système des URL a malheureusement changé...entrer une ancienne dans le nouveau ne fonctionnera pas (sauf si tu change le -vtXXXX par -tXXXX à la fin)...

[Christophe]

Waw bin c'est du rapide, 6000 pages indexés en quelques heures:

Environ 5.920 résultats (0,24 secondes)

Faut croire que ces urls ont manqués a Google...le fait que ce répertoire ait déjà été indexé doit beaucoup jouer dessus...

[chatelot16]

gogol trouve tout bistrot/on-a-retrouve-l-atlantide-grace-a-google-t7163.html

vu dans les sujet similaire en bas de page

[anaisac49]

gogol est fort !

je l'utilise pour chercher un tas de chose et il trouve souvent des reponse sur des site completement fermé prévoyances décès , pas accessible de façon normale , mais accessible uniquement par la recherche google

Moi je pense qu'il a indexé le site quand il était fonctionnel. Certes, le moteur aurait du le retirer des résultats, mais même les machines font des erreurs.