nntp2http.com
Posting
Suche
Optionen
Hilfe & Kontakt

Robots.txt und anderer Port als 80

X-FaceVon: Andreas Kohlbach (ank@spamfence.net) [Profil]
Datum: 06.10.2009 03:55
Message-ID: <87k4z9thf5.fsf@usenet.ankman.de>
Newsgroup: de.comm.internet.misc
Ich habe einen Pseudo-Webserver laufen auf einem Port bei 8080, der eine
Webseite dort generiert. Auf selber IP (ist dyndns, vielleicht ist dort
das Problem?) läuft noch ein "echten" Webserver auf Port 80.

Auf der Seite für Port 8080 kann ich leider kein

<meta name="ROBOTS" content="NOINDEX,NOFOLLOW">

setzen. Ich habe auf dem "echten" eine robots.txt [1], die es den
Suchmaschinen verbietet, zu indizieren. Leider wird trotzdem die Seite,
die auf Port 8080 angezeigt wird, bei Suchmaschinen indiziert. Ist mein
Gedankengang falsch, dass die robots.txt auf Port 80 das doch unterbinden
sollte?

[1]
User-agent: *
Disallow: /
--
Andreas       (PGP Key available on public key servers)
41. System coming down in 0 min....
--Top 100 things you don't want the sysadmin to say

[ Auf dieses Posting antworten ]

Antworten