robots.txt

    Hallo,

    bei der Installation von WordPress wird man ja gefragt, ob der Blog von Suchmaschinen erfasst werden soll. Ich habe irgendwo gelesen, dass diese Auswahl mit einer Datei namens robots.txt in Verbindung steht. Obwohl ich die Frage bei der Installation positiv beantwortet habe, finde ich keine solche Datei. Könnt ihr mir helfen?

    Liebe Grüße
    Hugo

    • Gerade eben
    • Anzeige

    Hallo!

    Wenn du gerade an deiner Website arbeitest oder dein aktuelles Hosting überdenkst: Wir betreiben mit NetzLiving eine Hosting-Plattform, die speziell auf Performance, Sicherheit und einfache Verwaltung ausgelegt ist.

    • ✔️ Schnelle Ladezeiten (optimiert für WordPress & Co.)
    • ✔️ Deutsche Server & DSGVO-konform
    • ✔️ Persönlicher Support (kein 0815-Ticket-System)

    Mehr erfahren

    Ich würde in jedem Fall die robots.txt ins Root-Verzeichnis packen. Doppelt Aussperren kann nicht schaden. Selbst wenn Wordpress selbst eine solche Datei irgendwo anlegt, werden sich die beiden Infos kaum in die Quere kommen.

    Hast du mal versucht die robots.txt aufzurufen? Ich meine das WP da eine dynamisch ausliefert, wenn keine physisch vorhanden ist. Ansonsten brauchst du keine robots.txt um SuMas zu erlauben, deine Seite zu indexieren. Das machen sie auch so. Du kannst es mit einer robots.txt aber verbieten. (Siehe auch Forenlexikon)

    Pixelraver - Wie gesagt, ich konnte keine robots.txt finden. Was muss ich denn in diese Datei hineinschreiben?

    marX - Ich habe es gerade versucht, über domain.de/robots.txt (WordPress liegt direkt im Root). Das führte aber zu einem 404er.

    Welchen Unterschied macht es denn überhaupt, ob ich bei der Installation das Indexieren durch Suchmaschinen explizit erlaube oder verbiete ("Ich möchte, dass mein Blog in Suchmaschinen wie Google oder Technorati erscheint.")? Also was wird bei der WordPress-Installation dadurch geändert?

    Zitat von h-u-g-o

    Pixelraver - Wie gesagt, ich konnte keine robots.txt finden. Was muss ich denn in diese Datei hineinschreiben?


    Schau mal ins Forenlexikon: robots.txt <- *klick* . Dort gibts weiterführende Infos.

    Zitat

    Welchen Unterschied macht es denn überhaupt, ob ich bei der Installation das Indexieren durch Suchmaschinen explizit erlaube oder verbiete ("Ich möchte, dass mein Blog in Suchmaschinen wie Google oder Technorati erscheint.")? Also was wird bei der WordPress-Installation dadurch geändert?


    Wenn du es verbietest, dann wird das Anpingen der Pingdienste abgeschaltet und es sollte eine (virtuelle?) robots.txt angelegt werden, die das Indexieren durch Suchmaschinen verbietet.

    Prima. Bei Wikipedia werden ja sogar die benötigten Befehle beschrieben. Danke sehr! :-D

    Dann wird vielleicht nur dann eine (virtuelle) robots.txt erstellt, wenn man es verbietet.

    ---
    Edit: Bezüglich meines Eingangsbeitrags: ich glaube, hier hatte ich das gelesen.

    Kann man sich hier eigentlich auch per E-Mail benachrichtigen lassen, wenn ein Beitrag nachträglich editiert wurde?

    Einmal editiert, zuletzt von h-u-g-o (10. Februar 2009 um 15:21)

    Zitat von h-u-g-o

    Prima. Bei Wikipedia werden ja sogar die benötigten Befehle beschrieben. Danke sehr! :-D


    Die gibts u.a. auch bei SELFHTML und anderen Werken. Oder offiziell:
    The Web Robots Pages
    (Hättest du mit der Suchmaschine deines geringsten Misstrauens sicher in wenigen Sekunden gefunden. ;-))

    Zitat

    Dann wird vielleicht nur dann eine (virtuelle) robots.txt erstellt, wenn man es verbietet.


    Möglich. Ausprobiert habs ich nicht. Ich setze immer auf eine handgeschriebene robots.txt, wenn eine nötig ist. ;-)

    Da hast du wohl recht. Aber ich vertraue dir eben mehr als der Suchmaschine meines geringsten Misstrauens. :mrgreen: Danke dir!

    Auf jeden Fall wird die robots.txt immer ins Root-Verzeichnis gelegt, ja? (Edit: Das steht ja bei SELFHTML, sorry!)

    ---
    PS: Die "Direkt antworten"-Funktion klappt bei mir nicht. Ich kann den Standardtext ("Bitte klicke auf eines der 'Direkt antworten'-Symbole unten rechts in den Beiträgen, um unkompliziert direkt in der Themenansicht auf einen Beitrag zu antworten.") markieren, aber ihn nicht ersetzen. :-?

    zu deinem PS: du musst dann auch wirklich vorher auf die entsprechende "direkt antworten" Grafik klicken:

    [size=10]Bitte immer zuerst die Forensuche nutzen und erst danach Deine Fragen hier im Forum stellen, denn sehr vieles wurde schon mehrfach beantwortet. Bitte dabei auch die Forenregeln beachten.
    Kein Support per PN - Fragen gehören ins Forum.[/SIZE]
    [size=8]Wenn du eine weise Antwort verlangst, musst du vernünftig fragen. (Johann Wolfgang von Goethe)[/SIZE]

Jetzt mitmachen!

Sie haben noch kein Benutzerkonto auf unserer Seite? Registrieren Sie sich kostenlos und nehmen Sie an unserer Community teil!

Benutzerkonto erstellen Anmelden