Wo liegt bei Wordpress die robots.txt?

Hallo,

ich kann weder im Wordpress root Verzeichnis die robots.txt finden und auch nicht im Template Ordner.

Jedoch erscheint wenn ich http://omsearch.de/robots.txt aufrufe eine robots.txt Datei. Woher kommt die?

Danke

Hallo,
danke für die Info. Sowas habe ich mir schon fast gedacht, nachdem ich die Datei nicht finden konnte. Nur bei Google Suchen nach Wordpress robots.txt usw wurde mir gesagt, dass diese im Wordpress root liegen soll. Ich fand dort aber keine... usw :-)

Ich kann also theoretisch meine eigene robots.txt hochladen und dann wird diese anstatt der von Wordpress generierten robots.txt genutzt?

Ich wollte nämlich mehre Bereiche ausschließen wie Archiv-, Kategorie- und Tagseiten, da diese aktuell die Rankings meiner Artikel runterdrücken.

Hallo,
ja ich setze dazu schon ein SEO Plugin ein, welches per Meta Tag die entsprechenden Seiten auf noindex stellt. Jedoch wollte ich dies auch noch einmal in der robots.txt referenzieren. ;)