Hallo,
ich nutze das CMS Wordpress, habe in den Einstellungen auch alles Suchmaschinen erlaubt meine Inhalte ohne Einschränkungen aufzunehmen, nun ergab sich jedoch folgendes Problem: Als ich eine Sitemap anlegte und diese bei Google anmeldete kam folgende Fehlermeldung:
URL wird von der "robots.txt"-Datei blockiert.
Das Problem ist, es gibt gar keine robots.txt Datei. Soweit so gut, also erstellte ich einfach eine und legte diese im Hauptordner ab Inhalt:
User-agent: *
Disallow:
Problem ist, klappt trotzdem nix :D
kann mir da wer helfen? Lieben Gruß Rob