Seleccionar página

robots.txt curiosos

robots.txt es un fichero de texto que recomienda a los buscadores como google qué buscar y qué no buscar dentro de una web. La palabra Disallow sirve para indicar lo que no queremos que vea el buscador, así, si en el fichero aparece la línea: Disallow: /imagenes...