Einstellung für robots.txt

    hallo, von den Webmastertools bekomme ich die Meldung, dass meine Domain durch robots.txt blockiert wird:

    User-agent: *
    Disallow: /

    Aber wenn ich die direkt aufrufe, hat sie diesen Inhalt:

    User-agent: * Disallow: /wp-admin/ Disallow: /wp-includes/
    Gibt es irgendwo eine Einstellung außer derjenigen, wo man anklickt, dass Suchmaschinen die Seite indexieren dürfen?

    • Gerade eben
    • Anzeige

    Hallo!

    Wenn du gerade an deiner Website arbeitest oder dein aktuelles Hosting überdenkst: Wir betreiben mit NetzLiving eine Hosting-Plattform, die speziell auf Performance, Sicherheit und einfache Verwaltung ausgelegt ist.

    • ✔️ Schnelle Ladezeiten (optimiert für WordPress & Co.)
    • ✔️ Deutsche Server & DSGVO-konform
    • ✔️ Persönlicher Support (kein 0815-Ticket-System)

    Mehr erfahren

    Die robots.txt-Datei, die Wordpress "erzeugt", ist ja nur virtuell. Gibt es eine echte Datei robots.txt im Wurzelverzeichnis der Domain, dann wird diese verwendet.


    Gruß
    Ingo

    Wenn ich helfen konnte, bitte [ Gefällt mir ] klicken. :-)

    nein, eine andere hab ich nicht. Aber mal sehen, möglicherweise löst sich dieses Problem von selber - hab ich irgendwo gelesen.

    Ja, hier solltest du teuflisch auf die Syntax achten.
    User-agent: *
    Disallow: /
    - bedeutet praktisch die Sperrung aller Suchmaschinen! Und zwar für alles!
    Zudem benutze nur einen neutralen Editor, wie notepad um keine Steuerzeichen mit reinzubringen.
    Jede Anweisung eine Zeile, da du oben nebeneinander geschrieben hast.
    Am besten google mal, wie die Syntax genau ist, je nach zweck.

    Wenn du nur den wp-admin sperren willst, wäre das z.B.

    User-agent: *
    Disallow: /wp-admin/

    Du kannst auch gezielt die google-bots ansprechen z.B. mit
    User-Agent: Googlebot
    Disallow: /wp-admin/

    Und validieren - das z.B. könnte helfen.
    http://www.searchenginepromotionhelp.com/m/robots-text-…ots-checker.php

    Viele Grüsse

    das stammt nicht von mir, hab ich aus den Webmaster-Tools kopiert:

    Zitat

    User-agent: *
    Disallow: /

    Die virtuelle robots.txt von der Purzlowitsch sprach zeigte nämlich diese Einstellungen:

    Zitat

    Disallow: /wp-admin/
    Disallow: /wp-includes/

    Woher Google die Sperreinstellung hat, weiß ich nicht. Eine physische robots.txt hab ich nicht drauf kopiert. Und bis dato kenne ich nur den Schalter in > Einstellungen > Privatsphäre

    Falls es eine weitere Einstellung diesbezgl. gibt, würde ich mich über einen Hinweis sehr freuen.

    Ich wünsch euch einen schönen Tag. Hoffentlich friert ihr nicht :)

Jetzt mitmachen!

Sie haben noch kein Benutzerkonto auf unserer Seite? Registrieren Sie sich kostenlos und nehmen Sie an unserer Community teil!

Benutzerkonto erstellen Anmelden