1
Ist meine robots.txt fehlerhaft oder missverständlich?
wieso finden sich Dateien aus den gesperrten Verzeichnissen im Google Index, als Suchergebnis-Zombies lediglich mit dem Link "Ähnliche Seiten" ausgestattet?
site:forum.joergkrusesweb.de
Da bemüht man sich, zu verhindern, dass unnütze Dateien in die Suchmaschinen-Indices geraten, und Google zieht sie sich trotz Verbot.
User-agent: *
Disallow: /neu/
Disallow: /edit/
Disallow: /login/
wieso finden sich Dateien aus den gesperrten Verzeichnissen im Google Index, als Suchergebnis-Zombies lediglich mit dem Link "Ähnliche Seiten" ausgestattet?
site:forum.joergkrusesweb.de
Da bemüht man sich, zu verhindern, dass unnütze Dateien in die Suchmaschinen-Indices geraten, und Google zieht sie sich trotz Verbot.