# Ejemplo archivo robots.txt  
#
# Determinar que robots ingresan: googlebot, scooter, etc. Todos="*"
User-agent:* 

# Impedir que el robot indexe el directorio ej: " /dibujos/imagenes ". 
# Una línea por cada directorio que se desee bloquear
# Si se pne "/" se impedirá el acceso a todo el sitio
Disallow: /cgi-bin/ 
Disallow: /tmp/