Hallo,

ich maskiere meine e-mail adresse mit <a href="&#109;&#97;&#105;&#108;&#116;&#111;&#58;und-so-weiter
also das "mailto" auch.

Nun sehe ich im error-log, dass ab und an die Datei /& angefragt wird.

Ich möchte jetzt aber nicht, die guten Spider (wie Google) ins Leere laufen lassen und habe mir folgende robots.txt überlegt:

# robots.txt
User-agent: *
Disallow: /&

Wird diese robots.txt von spidern richtig verstanden?
Schafft das Zeichen "&" vielleicht Probleme?

Grüsse
r a c

hi,
dieses "&" ist doch nur in der verschlüsselten adresse vorhanden,worüber machst du dir dann sorgen,ob der spider nun mit "mailto" oder "&" nichts anfangen kann ist doch egal,er wird beides nich weiterverfolgen oder indexieren.

mfg
--------------------------
http://www.buzzbomb.de
http://www.logo-style.de
http://www.spamming-warfare.de

die bösen spider sind mir an dieser Stelle egal.die finden keine e-mail adresse und das ist gut so.

die guten machen mir Sorgen. Ich möchte nicht, dass eine liebe Suchmaschine, die meine Links verfolgt, irrtümlich /& sucht und dann ein 404 Not Found zurückbekommt.

hi,
wie gesagt,wenn er nichts findet wird er auch nichts indexieren,deswegen wird er aber nicht deine komplette seite kicken,keine bange ;)

mfg
--------------------------
http://www.buzzbomb.de
http://www.logo-style.de
http://www.spamming-warfare.de

Trozdem ist es sicher besser 404 zu vermeiden.

wenn also "Disallow: /&" funktioniert, wäre das gut.

wenn aber das "&" nicht verstanden wird, oder noch schlimmer, als "Disallow: /" interpretiert wird (in letzdem Falle flöge ich tatsächlich aus dem Index), dann is nicht so gut.

ich möchte in diesem Fall also keinen Fehler machen.

hi rac!

Es macht durchaus sinn, auf der Site so wenig "tote links" wie möglich
auf einer site zu haben... Eine "gute" suchmaschine wertet nämlich
tote Links negativ auf das Ranking :) resp. :(

Über die Theorie, was mit dem /& passiert wage ich mich nicht etwas
auszusagen... Ich empfehle jedoch dies anstatt mit unicode mit JS
in das Dokument dynamisch zu schreiben (write()) denn dies können
Suchmaschinen noch weniger unterstützen!!

Ich erwarte, dass die Suchmaschinen früher oder Später das Unicode
auch zu 100% unterstützen, wenn sie's nicht heute schon tun :)

GrEeZ: Miro Dietiker

morgen

bei der seite wo ich betreue setze ich unicode schon seit langem ein. in der robots habe ich nichts eingegeben ausser einem "gesperrten verzeichnis - welches vollgestopft ist mit fake adressen .-) )"

bei google merke ich keine negativen auswirkungen. auch bei anderen ist mir nichts negatives aufgefallen.

der spam befall hält sich in grenzen, gemäss seiteninhaber. allerdings denke ich das unicode kein langandauernder schutz ist - da die spamer doch ziemlich clever sind.

js verschlüsselung finde ich nicht so gut, es gibt etliche wo js deaktiviert haben... dynamisch js erscheint mir dennoch sinvoll da es nicht statisch in der seite steht.

wish

Danke allen.

Die robots.txt lass ich wohl besser bleiben. Zu unklar, wie das Zeug interpretiert wird.

Unicode oder JS: bin noch unschlüsssig. Bis anhin wollte ich wichtige Dinge nicht von JavaScribt abhängig machen.

Und ich habe die Logs durchforstet. Ich denke jetzt auch, dass Google Unicode versteht (und deshalb merkt: mailto - also nicht folgen). Es sind wohl nur kleiner (z.B. http://www.search.ch), die sich nach <a href="&#... sofort auf die Suche nach der Datei & machen. Damit kann man leben. Meine Panik war wohl unberechtigt :-)

Grüsse r a c