# fichero robots.txt para www.miweb.unican.es # Version 1.0 #Evitar que el buscadorUC indexe el directorio "/interno" e "/interno.html" User-agent: BuscadorUC Disallow:/quimica/personal #Evitar que el buscadorMolesto indexe nada User-agent: buscadorMolesto Disallow:/quimica/personal #Evitar que el resto de agentes indexen el /interno e "/interno.html y el /otrascosas #El /otrascosas.html se indexará (observar la barra) #El asterisco sólo se puede usar en User-Agent User-agent:* Disallow:/quimica/personal