Die robots.txt-Datei muß da liegen, wo sich die Wurzel der Domain befindet. Sei muß mit http://example.com/robots.txt abrufbar sein und nicht mit http://example.com/wordpress/robots.txt oder sonst einem anderen Unterverzeichnis.
Wenn Dein WP in einem Ordner /wordpress/ liegt und auch so aufgerufen wird, müßt der Eintrag in der robots.txt natürlich auch entsprechend das Verzeichnis /wordpress/ enthalten, also:
Gruß
Ingo
Doch Ingo! Ich habe noch einen!
Leuchtet mir alles ein, was du sagst. Aber wie erkenne ich, wo genau meine Domain liegt. Wenn es scheinbar 2 Möglichkeiten gibt: Ordner Wordpress oder oberstes Root-Verzeichnis des Servers. An welchem Ordner oder an welcher Datei sehe ich, wo meine Domain liegt. Für mich ist das alles sehr verwirrend, weil die einen so schreiben, die anderen anders.