Servus Leute, ich muss mal wieder stören... und zwar möchte ich ein bestimmtes Verzechnis mithilfe der robots.txt vor Crawlern blocken.
Google habe ich bemüht aber nichts zu meinem speziellen Fall gefunden.
Ich möchte folgendes Verzeichnis ausschließen: /autos/
Folgendes soll aber noch indexiert werden können: /autos/[COLOR=#ff0000]porsche[/COLOR]/
Suchmaschinen sollen gehindert werden folgende URL in den Index zu nehmen: http://www.example.com/autos/
So welche URLs sollen aber weiterhin indexiert werden: http://www.example.com/autos/porsche/
Wenn ich:
Code
User-agent: *
Disallow: /autos/in die robots.txt setze, werden doch auch URLs wie /autos/porsche/ gesperrt, oder nich?
Würde mich über Hilfe freuen! :)