Re: Welche Form von robots.txt ist richtig?
Von: Christoph Schneegans (christoph@schneegans.de) [Profil]
Datum: 26.10.2007 23:22
Message-ID: <5of44qFml21gU1@mid.individual.net>
Newsgroup: de.comm.infosystems.suchmaschinen
Datum: 26.10.2007 23:22
Message-ID: <5of44qFml21gU1@mid.individual.net>
Newsgroup: de.comm.infosystems.suchmaschinen
Theo Fried schrieb: > oder darf ich auch schreiben > > User-agent: Xrobot > User-agent: Yrobot > User-agent: Zrobot > Disallow: / Das wird bereits durch <http://www.robotstxt.org/wc/norobots.html> erlaubt. -- <http://schneegans.de/web/kanonische-adressen/> · URLs richtig verwenden[ Auf dieses Posting antworten ]
Antworten
- Theo Fried (27.10.2007 00:53)
- Josephine Hunter (27.10.2007 02:24)
- Christoph Schneegans (28.10.2007 02:02)