Eintragung bei Google Einstellungen

[Ahnungslos]

Eine Frage:

Wie trage ich meine Website bei google und anderen Suchmaschinen ein?

[waltari]

Hallo Conny,

Persönlich benütze ich für meine Seiten auch die*robot.txt* und  entspreche Meta-Tags. Habe mir aber sagen lassen, daß nicht alle Crawler nach robot.txt suchen

Wenn du nur allgemein von Crawlern ausgehst, hast du natürlich recht. Ein Crawler, der darauf abzielt Emails einzusammeln, den interessiert die robots.txt natürlich einen Sch***.
Und solltest du auf deinen Seiten wirklich robot.txt benutzen, funktioniert es sowieso nicht, weil die Suchmaschinen nur robots.txt kennen.
Aber in diesem Thread ging es ja um Google und Google liest den robots.txt Und wenn in besagtem steht, dass keine Crawler erlaubt sind, crawlt Google hier auch nicht. Genauso verhält sich Slurp (der Inktomi-Bot). Und meines Wissens auch der Fireball-Bot.

Timo