User-agent: * # l'astérisque ou .wildcard. a fonction de joker, les paramètres s'appliqueront à tous les robots. Disallow: /wp- # On interdit l'accès aux répertoires de wordpress tels que wp-includes et wp-content. Disallow: /search Disallow: /feed Disallow: /comments/feed Disallow: /feed/$ Disallow: /*/feed/$ Disallow: /*/feed/rss/$ Disallow: /*/trackback/$ Disallow: /*/*/feed/$ Disallow: /*/*/feed/rss/$ Disallow: /*/*/trackback/$ Disallow: /*/*/*/feed/$ Disallow: /*/*/*/feed/rss/$ Disallow: /*/*/*/trackback/$ # On interdit l'accès aux pages de recherches, aux trackbacks, aux fils RSS du blog, des billets, et des commentaires. Disallow: /*?* Disallow: /*?# # On interdit l'accès aux urls qui contiennent des paramètres (ex: http://nophysic.com/?s=cinema) Disallow: /theme/*/* Disallow: /tag/*/* # Les pages de catégories et de tags sont un exemple typique de Duplicate Content, on les bloque aussi. User-agent: Googlebot-Image Disallow: Allow: /* # Google Image indexera toutes les images User-agent: Mediapartners-Google* Disallow: Allow: /* # Google AdSense aura accès à tout User-agent: duggmirror Disallow: / # digg mirror ne pourra pas sauvegarder une page après qu'elle soit passée sur Digg # BEGIN XML-SITEMAP-PLUGIN Sitemap: http://www.rencontre-de-cul.com/sitemap.xml.gz # END XML-SITEMAP-PLUGIN