nntp2http.com
Posting
Suche
Optionen
Hilfe & Kontakt

Re: Neuer Googlebot ohne Beachtung von robots.txt?

Von: Juergen Kuehne (hexelbox@gmx.de) [Profil]
Datum: 31.01.2008 22:15
Message-ID: <fntdgj$iju$00$1@news.t-online.com>
Newsgroup: de.comm.infosystems.suchmaschinen
Uwe Schröder schrieb:
> Juergen Kuehne wrote:
>
>>>Woraus schließt du, daß es ein Bot war?
>>
>>wie ich schrieb, wurde versucht, Daten zu lesen, die (auch) für
>>Googlebot in der robots.txt ein no-no steht,
>
> Irgendwie sehe ich in der Antwort keinen rechten Zusammenhang mit
> meiner Frage.
>
> Du folgerst also, wenn irgendwer auf Daten zugreift, die per
> robots.txt für Bots tabu sind, daß es *deswegen* ein Bot sein muß?

Nein, so nicht... aber
1. war es ne Google-IP ;-)
2. wie Simon schon schrieb, kein User-Agent


Genauer möchte ich allerdings nicht werden, wollte vor allem wissen, ob
jemand die IPs auch schon gesichtet hat.

Ich weiss, dass es keinen grossen Aufwand macht, ohne User-Agent zu
"surfen"... ;-)

Jürgen

[ Auf dieses Posting antworten ]