Hallo,

ich plane auf meiner persönlichen Webseite Kontaktdaten und Weiteres online zu stellen, die aber nicht öffentlich auffindbar sein sollen, ausser für Personen, die ich da "hinschicke". Die regulären Suchmaschinen können ja per Robots.txt ferngehalten werden, aber die "unfreundlichen" Crawler interessiert das ja nicht.

Kann ich z. B. eine Webseite generieren, die die Adresse http://www.abc123.de/untermenue/strenggeheim.html enthält, diese aber nirgendwo verlinke, auch nicht in der Sitemap? Wird diese spezielle Seite dann trotzdem von Crawlern gefunden?

Danke für Beiträge.