Hallo,
ich versuche mich seit einigen Tagen in Wordpress 3.1.3 und komme, auch Dank dieses Forums, zwischenzeitlich ganz gut zurecht.
In punkto robots.txt bzw. dem Ausschließen meines Impressums von den Suchmaschinen, habe ich nun folgende Hinweise finden können:
In der header.php ist folgender Zusatz eingetragen:
<meta name="robots" content="<?php if(is_page('impressum')){echo'noindex,nofollow';}else{echo'index,follow,noodp';};?>" />
Die robots.txt sieht folgendermaßen aus.
User-agent: Adsbot-Google
Disallow:
User-agent: Googlebot
Disallow:
User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /wp-content/themes/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /cache/
Disallow: /cache/*
Disallow: /wp-content/cache
Disallow: /wp-content/plugins/
Disallow: /wp-includes/
Disallow: /wp-includes/*
Disallow: /wp-admin/*
Disallow: /wp-admin/
Disallow: /wp-images/
Disallow: /wp-images/*
Disallow: /plugins/
Disallow: /plugins/*
Disallow: /author/
Disallow: /author/*
Disallow: /page/
Disallow: /page/*
Disallow: /search/
Disallow: /search/*
Disallow: /login/
Disallow: /login/*
Disallow: /cgi-bin/
Disallow: /cgi-bin/*
Disallow: /login/
Disallow: /login/*
Disallow: /backup/
Disallow: /backup/*
Disallow: /archives/
Disallow: /archives/*
Disallow: /trackback
Disallow: /comments
Disallow: /comments/feed
Disallow: */comments
Disallow: */trackback
Disallow: */trackback/$
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /impressum
Disallow: /category/*
Disallow: /category/
Disallow: /impressum/
Im speziellen bei der Robots.txt habe ich das Gefühl, dass sicher einige Einträge überflüssig oder zuviel des Guten sind. Habe mir diese Einträge sozusagen zusammen gegoogelt.
Im Moment geht es mir primär um das Impressum. Ggf. möchte ich zu einem späteren Zeitpunkt noch weitere Seiten von den Suchmaschinen ausklammern.
Frage: Passen die Einträge in der header.php und der robots.txt oder lässt sich das optimieren bzw. kürzen?
Besten Dank und Gruß