Für Webmaster stellt Google die Webmaster Tools zur Verfügung.
https://www.google.com/webmasters/tools/home?hl=dehier kann man die robots.txt testen und prüfen.
Für den Webmaster stellt Google auch weitere Inofrmationen zur Verfügung.
https://support.google.com/webmasters/ans…2608?hl=de&rd=1Mit Disallow: [usw] kann man das von dir genannte Ergebnis erreichen.
Ok, danke, ich werde dass mal anschauen. Kenne mich leider absolut nicht aus. Vielen Dank jedenfalls für die schnelle Antwort!