Robots.txt Syntax Fehler

Makrele221

Hi,
meine robots.txt Datei sieht folgendermaßen aus:

`User-agent: *

Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php

Sitemap: http://einfachmeditieren.net/sitemap.xml`

In der Google Search Console bekommt ich für die erste Zeile den Fehler: "Syntax wurde nicht verstanden".

Die robots.txt Datei ist als UTF-8 formatiert. Ich habe nun diese Anleitung gefunden:
http://www.carlj.ca/2014/05/05/web…tax-understood/

Macht diese Umsetzung Sinn oder wie kann ich den Fehler sonst beheben?

Danke,
Markus

Werbepost

Hallo!

Wenn du gerade an deiner Website arbeitest oder dein aktuelles Hosting überdenkst: Wir betreiben mit NetzLiving eine Hosting-Plattform, die speziell auf Performance, Sicherheit und einfache Verwaltung ausgelegt ist.

✔️ Schnelle Ladezeiten (optimiert für WordPress & Co.)
✔️ Deutsche Server & DSGVO-konform
✔️ Persönlicher Support (kein 0815-Ticket-System)

Mehr erfahren

b3317133

Das erste Zeichen (bzw. genauer die erste drei Bytes) in der robots.txt (auf dem Screenshot der rote kleine Kringel) ist ein UTF-8 BOM, der dort nichts verloren hat. Du kannst diese Zeichen/Bytes sehen, wenn Du Deine robots.txt mit einem Hex-Editor anschaust oder z.B. hier hochlädst.

Makrele221

Alles klar, reicht es wenn ich die Datei nochmal neu erstelle und als UTF-8 abspeichre oder was kann ich da tun?

Hille

Ja, aber ohne BOM

b3317133

In Deiner robots.txt (und in allen, die ich sonst kenne) ist kein einziges Zeichen, das eine UTF-8 Kodierung erfordern würde. Daher kannst Du die robots.txt auch einfach als ANSI o.ä. speichern und hochladen.

Makrele221

Danke, der Fehler ist verschwunden.

Willkommen! Melden Sie sich an oder registrieren Sie sich.

Robots.txt Syntax Fehler

Jetzt mitmachen!