{\rtf1\ansi\ansicpg1252\cocoartf1038\cocoasubrtf320 {\fonttbl\f0\fnil\fcharset0 Verdana;\f1\fnil\fcharset0 LucidaGrande;} {\colortbl;\red255\green255\blue255;\red50\green98\blue134;} \paperw11900\paperh16840\margl1440\margr1440\vieww16380\viewh12300\viewkind0 \deftab720 \pard\pardeftab720\sl320\sa240\ql\qnatural \f0\fs24 \cf0 # \f1 \uc0\u8232 \f0 # robots.txt para tu blog en WordPress. \f1 \uc0\u8232 \f0 # \f1 \uc0\u8232 \f0 # Usar bajo propia responsabilidad, que nos conocemos \}:) \f1 \uc0\u8232 \f0 # \f1 \uc0\u8232 \f0 # Primero el contenido adjunto. \f1 \uc0\u8232 \f0 User-Agent: * \f1 \uc0\u8232 \f0 Allow: /wp-content/uploads/ \f1 \uc0\u8232 \f0 Disallow: /wp-content/{\field{\*\fldinst{HYPERLINK "http://ayudawordpress.com/categoria/plugins/"}}{\fldrslt \cf2 plugins}}/ \f1 \uc0\u8232 \f0 Disallow: /wp-content/{\field{\*\fldinst{HYPERLINK "http://ayudawordpress.com/categoria/themes/"}}{\fldrslt \cf2 themes}}/ \f1 \uc0\u8232 \f0 Disallow: /wp-includes/ \f1 \uc0\u8232 \f0 Disallow: /wp-admin/ \f1 \uc0\u8232 \f0 # Tambi\'e9n podemos desindexar todo lo que empiece \f1 \uc0\u8232 \f0 # por wp-. Es lo mismo que los Disallow de arriba pero \f1 \uc0\u8232 \f0 # incluye cosas como wp-rss.php \f1 \uc0\u8232 \f0 Disallow: /wp- \f1 \uc0\u8232 \f0 # \f1 \uc0\u8232 \f0 # Sitemap permitido, b\'fasquedas no. \f1 \uc0\u8232 \f0 # \f1 \uc0\u8232 \f0 Sitemap: http://tu-web/sitemap.xml \f1 \uc0\u8232 \f0 Disallow: /?s= \f1 \uc0\u8232 \f0 Disallow: /search \f1 \uc0\u8232 \f0 # \f1 \uc0\u8232 \f0 # Permitimos el feed general para Google Blogsearch. \f1 \uc0\u8232 \f0 # \f1 \uc0\u8232 \f0 # Impedimos que permalink/feed/ sea indexado ya que el \f1 \uc0\u8232 \f0 # feed con los comentarios suele posicionarse en lugar de \f1 \uc0\u8232 \f0 # la entrada y desorienta a los usuarios. \f1 \uc0\u8232 \f0 # \f1 \uc0\u8232 \f0 # Lo mismo con URLs terminadas en /trackback/ que s\'f3lo \f1 \uc0\u8232 \f0 # sirven como Trackback URI (y son contenido duplicado). \f1 \uc0\u8232 \f0 # \f1 \uc0\u8232 \f0 Allow: /feed/$ \f1 \uc0\u8232 \f0 Disallow: /feed \f1 \uc0\u8232 \f0 Disallow: /comments/feed \f1 \uc0\u8232 \f0 Disallow: /*/feed/$ \f1 \uc0\u8232 \f0 Disallow: /*/feed/rss/$ \f1 \uc0\u8232 \f0 Disallow: /*/trackback/$ \f1 \uc0\u8232 \f0 Disallow: /*/*/feed/$ \f1 \uc0\u8232 \f0 Disallow: /*/*/feed/rss/$ \f1 \uc0\u8232 \f0 Disallow: /*/*/trackback/$ \f1 \uc0\u8232 \f0 Disallow: /*/*/*/feed/$ \f1 \uc0\u8232 \f0 Disallow: /*/*/*/feed/rss/$ \f1 \uc0\u8232 \f0 Disallow: /*/*/*/trackback/$ \f1 \uc0\u8232 \f0 # \f1 \uc0\u8232 \f0 # A partir de aqu\'ed es opcional pero recomendado. \f1 \uc0\u8232 \f0 # \f1 \uc0\u8232 \f0 # Lista de bots que suelen respetar el robots.txt pero rara \f1 \uc0\u8232 \f0 # vez hacen un buen uso del sitio y abusan bastante\'85 \f1 \uc0\u8232 \f0 # A\'f1adir al gusto del consumidor\'85 \f1 \uc0\u8232 \f0 User-agent: MSIECrawler \f1 \uc0\u8232 \f0 Disallow: / \f1 \uc0\u8232 \f0 User-agent: WebCopier \f1 \uc0\u8232 \f0 Disallow: / \f1 \uc0\u8232 \f0 User-agent: HTTrack \f1 \uc0\u8232 \f0 Disallow: / \f1 \uc0\u8232 \f0 User-agent: Microsoft.URL.Control \f1 \uc0\u8232 \f0 Disallow: / \f1 \uc0\u8232 \f0 User-agent: libwww \f1 \uc0\u8232 \f0 Disallow: / \f1 \uc0\u8232 \f0 # \f1 \uc0\u8232 \f0 # Slurp (Yahoo!), Noxtrum y el bot de MSN a veces tienen \f1 \uc0\u8232 \f0 # idas de pinza, toca decirles que reduzcan la marcha. \f1 \uc0\u8232 \f0 # El valor es en segundos y pod\'e9is dejarlo bajo e ir \f1 \uc0\u8232 \f0 # subiendo hasta el punto \'f3ptimo. \f1 \uc0\u8232 \f0 # \f1 \uc0\u8232 \f0 User-agent: noxtrumbot \f1 \uc0\u8232 \f0 Crawl-delay: 50 \f1 \uc0\u8232 \f0 User-agent: msnbot \f1 \uc0\u8232 \f0 Crawl-delay: 30 \f1 \uc0\u8232 \f0 User-agent: Slurp \f1 \uc0\u8232 \f0 Crawl-delay: 10}