robots-txt

De Vulgum Techus
(Redirigé depuis robot-txt)
Aller à : Navigation, rechercher
Lien court vers cette page : http://vt.cx/rt
QR code vers cette page : http://vt.cx/rt.qr


Présentation

Le document texte robots.txt placé à la racine des sites Internet servent, en théorie, à indiquer les dossiers dont on ne souhaite pas l'indexation par les moteurs de recherches. Il ne faut pas compter sur robots.txt pour assurer une quelconque confidentialité d'un contenu placé en ligne car de nombreux bots et moteurs de recherche ne tiennent pas compte. Ainsi Google indexe les contenu, malgré ce qu'il indique à https://support.google.com/webmasters/answer/6062608?hl=fr, comme l'atteste la copie d'écran ci-dessous. Pour une bonne sécurisation de dossiers sensibles, il est donc préférable de recourir à la protections par mots de passe très facilement réalisable sur tout site grâce à .htaccess.

robots-txt UPU 141214.jpg
Exemple d'un document dont l'UPU ne voulait pas l'indexation par un moteur de recherche

Liens utiles

Articles Vulgum Techus

Articles Externes

Commentaires

blog comments powered by Disqus