Hallo,
bei mir wird http://www.domain.tld/feed/ in den Suchmaschinen angezeigt. Eine weniger schöne Sache. Also mit robots.txt ausschließen. Ich bin mir bloß in diesem Fall über die Syntax nicht im klaren. So wie diese Datei als URL erscheint, ist es Verzeichnis, aber es ist de facto eine Seite.
Jetzt hat google und vermutlich auch andere Dienste spezielle Verzeichnisse für blogs. Wie gehen die mit der robots.txt um. Erreichen will ich suchmaschinen-bot dürfen nicht rein, blogbots schon. Wie schreibt man das am besten.
GS
www.domain.tld/feed/ vor Suchmaschine verstecken
-
- Gerade eben
- Anzeige
Hallo!
Wenn du gerade an deiner Website arbeitest oder dein aktuelles Hosting überdenkst: Wir betreiben mit NetzLiving eine Hosting-Plattform, die speziell auf Performance, Sicherheit und einfache Verwaltung ausgelegt ist.
- ✔️ Schnelle Ladezeiten (optimiert für WordPress & Co.)
- ✔️ Deutsche Server & DSGVO-konform
- ✔️ Persönlicher Support (kein 0815-Ticket-System)
-
Alles anzeigen
Hallo,
bei mir wird http://www.domain.tld/feed/ in den Suchmaschinen angezeigt. Eine weniger schöne Sache. Also mit robots.txt ausschließen. Ich bin mir bloß in diesem Fall über die Syntax nicht im klaren. So wie diese Datei als URL erscheint, ist es Verzeichnis, aber es ist de facto eine Seite.
Jetzt hat google und vermutlich auch andere Dienste spezielle Verzeichnisse für blogs. Wie gehen die mit der robots.txt um. Erreichen will ich suchmaschinen-bot dürfen nicht rein, blogbots schon. Wie schreibt man das am besten.
GS
das geht nur, wenn Du weißt wie all die blogbots genau heißen.
bringt aber außer viel Aufwand gar nichts, weil sich sowieso nicht alle Suchmaschinenbots an die robots.txt halten.
lg
Jetzt mitmachen!
Sie haben noch kein Benutzerkonto auf unserer Seite? Registrieren Sie sich kostenlos und nehmen Sie an unserer Community teil!