# Archivo robots.txt personalizado 
User-agent: * # Todos los rastreadores son llamados aquí.

Disallow: /search*/ # Bloquea los directorios que empiecen por search
Disallow: /*search/ # Bloquea los directorios que acaben en search  
Disallow: /archive*/ # Bloquea los directorios que empiecen por archive  
Allow: / # Permite todo lo demás

User-agent: Mediapartners-Google  # Llama al robot de Adsense 
Allow: / # Al robot de Adsense le dejamos rastrear todas las páginas  

# Finalmente incluimos la dirección del sitemap xml 
Sitemap: http://www.tapapedia.blogspot.com.es/atom.xml?redirect=false&start-index=1&max-results=100