Beiträge von reinxen

Vielleicht am Server. Aber ich werde das ungute Gefühl nicht los, das die neue WP Version> 2.8 die virtuelle robots.txt mit irgendeinem Header ausliefert.
Denn, wenn Du die mal
http://www.vinums.com/lemberger/

anschaust, so merkt man das der media bot von Google nicht indiziert, da er nur Werbung über die robots.txt schaltet und nicht über den Content der Seite.

Ich glaube ich muss komplett neu installieren
Danke soweit

Ja das ist richtig und bei bei
http://www.vinums.com/weine/wines/
auch so gewollt, da Kategorieseite, ansonsten ein bisschen zuviel "robots" Einträge, sollte man korrigieren.
Was mich aber stutzig macht ist, dass Google die Startseite, obwohl ja "index, nofollow" nicht indiziert und stattdessen die virtuelle robots.txt von WP anzeigt!

Hallo,
Ich habe ein ähnliches Problem mit der virtuellen robots,txt.

Habe eine physische robots.txt im Wurzelverzeichnis liegen, die auch angezeigt wird wenn man sie aufruft.
Suchmaschinen bekommen aber eine virtuelle robots.txt angezeigt und indexieren diese!

Url: http://www.vinums.com

Google Suche : nur "vinums" Siehe Cache

d.h. die konplette Seite ist nicht mehr im Index, da bei der robots.txt Schluss ist!

Hat jemand eine Idee?