Hallo liebe Gemeinde,
bin seit heute Mitglied und habe direkt eine Frage an euch. Bei meiner Domain gibt es Probleme mit der Indexierung von Wordpress. Laut den Google Webmastertools, können über 100 Seiten nicht gefunden werden. Alle nicht gefundenen Seiten weisen folgendes Muster auf:
http://www.domain.de/2011/03/03/artikelname/admin - dieses Muster zieht sich durch die ganze Seite.
Meine robots.txt lautet wie folgt:
User-agent: *
# disallow all files in these directories
Disallow: /cgi-bin/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wpcontent/themes/
Disallow: /wp-content/plugins/
Disallow: /trackback/
Disallow: /*?*
Disallow: */trackback/
User-agent: Googlebot
# disallow all files ending with these extensions
Disallow: /*.php$
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
Disallow: /*.gz$
Disallow: /*.cgi$
Disallow: /*.wmv$
Disallow: /*.png$
Disallow: /*.gif$
Disallow: /*.jpg$
Disallow: /*.cgi$
Disallow: /*.xhtml$
Disallow: /*.php*
Disallow: */trackback*
Disallow: /*?*
Disallow: /category/
Disallow: /archives/
Disallow: /feed/
Disallow: /wp-*
Allow: /wp-content/uploads/
# allow google image bot to search all images
User-agent: Googlebot-Image
Allow: /*
# allow adsense bot on entire site
User-agent: Mediapartners-Google*
Disallow: /*?*
Allow: /wp-content/
Allow: /tag/
Allow: /category/
Allow: /*.php$
Allow: /*.js$
Allow: /*.inc$
Allow: /*.css$
Allow: /*.gz$
Allow: /*.cgi$
Allow: /*.wmv$
Allow: /*.cgi$
Allow: /*.xhtml$
Allow: /*.php*
Allow: /*.gif$
Allow: /*.jpg$
Allow: /*.png$
s
# disable duggmirror
User-agent: duggmirror
Disallow: /
Könnt ihr bitte helfen, wie ich dieses Indexierungsproblem lösen kann? Es werden irgendwie immer mehr Seiten, welche nicht gefunden werden.
Vielen Dank für die Hilfe!
Viele Grüße