# robots.txt 
#
# Las Tres Leyes de la Robótica
#
# 1. Un robot no puede causar daño a un ser humano o, por su inacción,
# permitir que un ser humano sufra daño.
#
# 2. Un robot debe obedecer las órdenes que le sean dadas por un ser
# humano, a menos que dichas órdenes entren en conflicto con la Primera Ley
#
# 3. Un robot debe proteger su propia existencia, siempre que ello no entre
# en conflicto con la Primera o la Segunda ley
#
# -- Isaac Asimov
#
# (robots.txt inspirado por yell.com/robots.txt y microsiervos.com)
#


#
# Bloqueo para todos los Crawlers que no son de motores de búsqueda y que roban contenido
#

User-agent: SiteSnagger
Disallow: /

User-agent: WebStripper
Disallow: /

User-agent: WebCopier
Disallow: /

User-agent: Fetch
Disallow: /

User-agent: Offline Explorer
Disallow: /

User-agent: Teleport
Disallow: /

User-agent: TeleportPro
Disallow: /

User-agent: WebZIP
Disallow: /

User-agent: HTTrack
Disallow: /

User-agent: Microsoft.URL.Control
Disallow: /

User-agent: Xenu
Disallow: /

User-agent: larbin
Disallow: /

User-agent: Download Ninja
Disallow: /

User-agent: NPBot
Disallow: /

User-agent: WebReaper
Disallow: /

# Ahora las reglas para los todos los Robots
User-agent: *
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-content/upgrade
Disallow: /wp-content/uploads
Disallow: /feed
Disallow: /comments

Disallow: /como-activar-windows-xp-en-menos-de-2-clicks/
Disallow: /milfuentes.rar/
Disallow: /internet/3-sitios-para-descargar-peliculas-estreno/
Disallow: /mi-novia-me-dejo-pero-me-sigue-llamando/
Disallow: /imagenes-de-corazones-que-brillan-corazones-brillantes/corazones-brilloso/
Disallow: /tag/que-hacer-con-una-mujer-manipuladora/
 
Sitemap: http://intertextual.com.ar/sitemap.xml