Um schreiben oder kommentieren zu können, benötigen Sie ein Benutzerkonto.
Sie haben schon ein Benutzerkonto? Melden Sie sich hier an.
Jetzt anmeldenHier können Sie ein neues Benutzerkonto erstellen.
Neues Benutzerkonto erstellen
Hallo!
Wenn du gerade an deiner Website arbeitest oder dein aktuelles Hosting überdenkst: Wir betreiben mit NetzLiving eine Hosting-Plattform, die speziell auf Performance, Sicherheit und einfache Verwaltung ausgelegt ist.
Poste mal den Inhalt deiner robots.txt
Poste mal ne URL
Toll,
User-agent: *
Disallow: /
entweder Du löscht die einfach oder Du gibst nicht an, dass alle Verzeichnisse / ausgeschlossen werden sollen, sondern nur welche, wie zum Beispiel
User-agent: *
Disallow: /privat/
Disallow: /wp-admin/
und richtest Dich nach den Beispielen auf dieser Seite:
https://developers.google.com/webmasters/con…ts_txt?hl=de-DE
Und versteckte Dateien und Verzeichnisse würde ich da auch nicht unbedingt einfügen, damit niemand auf die Idee verfällt, nach diesen zuerst zu suchen.
Hier mal eine Beispiel robots.txt
User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /wp-includes/
Disallow: /wp-admin/
User-agent: googlebot
Disallow: /wp-content/
Disallow: /wp-admin/
Disallow: /index.php
Disallow: /*?
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
User-agent: googlebot-image
Disallow: /wp-includes/
User-agent: mediapartners-google
Disallow: /*?*
Allow: /wp-content/
Allow: /tag/
Allow: /*.php$
Allow: /*.js$
Allow: /*.inc$
Allow: /*.css$
Allow: /*.gz$
Allow: /*.cgi$
Allow: /*.wmv$
Allow: /*.cgi$
Allow: /*.xhtml$
Allow: /*.php*
Allow: /*.gif$
Allow: /*.jpg$
Allow: /*.png$
User-agent: ia_archiver
Disallow: /
User-agent: duggmirror
Disallow: /
Lege in deinem root Verzeichnis eine robots.txt an und kopiere den Inhalt rein.
Wo finde ich diese Textdatei
Wo kommt die her, wenn es nicht Deine ist?
Wo kommt die her, wenn es nicht Deine ist?
Das ist vermutlich die von Wordpress virtuell erstellte Datei.
Gruß
Ingo
Gibts da nicht in den Wordpresseinstellungen den Haken das die Seite von Suchmaschinen indiziert werden darf?
Ja, den gibt es auch
Genau das meinte ich mit virtueller robots.txt-Datei.
Eine tatsächlich als Datei vorhanden robots.txt setzt allerdings diese virtuelle Datei außer Kraft.
Gruß
Ingo
Lege in deinem root Verzeichnis eine robots.txt an und kopiere den Inhalt rein.
welches ist das root verzeichnis?
Das, wo sich die wp-config.php befindet.
Also mit meta robots=noindex wird das aber auch nichts mit Google und den anderen Suchmaschinen.
Du solltest unter Einstellungen->Lesen die Option Sichtbarkeit für Suchmaschinen überprüfen.
Dort sollte bei
[ ] Verbietet Suchmaschinen die Website zu indexieren
kein Häkchen gesetzt sein.
Gruß
Ingo
Also mit meta robots=noindex wird das aber auch nichts mit Google und den anderen Suchmaschinen.
Der Tipp ist vom 06.01., bist irgendwie nicht der Schnellste mit Problemlösungen?
Deine robots.txt nutzt nichts, wenn Du dafür im Head der Seiten noindex einfügst. Entferne das und Dein Problem könnte gelöst sein.
<meta name='robots' content='noindex,follow' />Sie haben noch kein Benutzerkonto auf unserer Seite? Registrieren Sie sich kostenlos und nehmen Sie an unserer Community teil!