L’arxiu robots.txt es posa a l’arrel de la web per a indicar als cercadors, altrament coneguts com robots, quines rutes no han d’indexar.
Podeu comprovar per vosaltres mateixos/es el que diu l’arxiu robots.txt de la casa real española. xD
http://www.casareal.es/robots.txt
![]() ![]() | Compartir: ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() |
Tags: Humor, robots.txt
1.757 visualitzacions - versió en PDF