Robots.txt
- Ersteller sd12
- Erstellt am
Jürg Gutzwiller
Mitglied
Hallo
Jetzt bin ich mir nicht mehr sicher, aber soviel ich verstanden habe, kannst Du zwei verschiedene robots.txt einsetzen.
- eine für die Hauptdomain: www.domain.ch resp. domain.ch
direkt im root-Verzeichnis, mit dem Inhalt
User-agent: *
Disallow: /
und
- eine für die Subdomain: www.blog.domain.ch resp. blog.domain.ch
direkt im subdomain-Verzeichnis, mit dem Inhalt
User-agent: *
Disallow:
oder stimmt diese Annahme nicht?
Ansonsten gibts wohl nur die Möglichkeit, den Inhalt deiner Seite domain.ch in ein weiteres Unterverzeichnis zu legen und dieses für die Spider zu sperren.
Jetzt bin ich mir nicht mehr sicher, aber soviel ich verstanden habe, kannst Du zwei verschiedene robots.txt einsetzen.
- eine für die Hauptdomain: www.domain.ch resp. domain.ch
direkt im root-Verzeichnis, mit dem Inhalt
User-agent: *
Disallow: /
und
- eine für die Subdomain: www.blog.domain.ch resp. blog.domain.ch
direkt im subdomain-Verzeichnis, mit dem Inhalt
User-agent: *
Disallow:
oder stimmt diese Annahme nicht?
Ansonsten gibts wohl nur die Möglichkeit, den Inhalt deiner Seite domain.ch in ein weiteres Unterverzeichnis zu legen und dieses für die Spider zu sperren.
René Weber
Legendäres Mitglied
Ich würde folgendes versuchen:
User-agent: *
Disallow: www.domain.ch
Disallow: domain.ch
Allow: www.blog.domain.ch
Allow: blog.domain.ch
Leider bin ich aber nicht 100% sicher
Cheers, René
User-agent: *
Disallow: www.domain.ch
Disallow: domain.ch
Allow: www.blog.domain.ch
Allow: blog.domain.ch
Leider bin ich aber nicht 100% sicher
Cheers, René
Jürgen Auer
Legendäres Mitglied
</div><table border='0' align='center' width='95%' cellpadding='3' cellspacing='1'><tr><td>QUOTE ( @ Mo 30.10.2006, 10:53)</td></tr><tr><td id='QUOTE'><div style='overflow:auto;'>Wer hat kreative Ideen?[/QUOTE]
Kreative Ideen braucht man dazu nicht, das ist einfach nur der robots-Standard.
Und der besagt, daß die Lösung von @Jürg richtig ist. Die Sache läßt sich auch einfach im Browser testen:
http://blog.domain.ch/robots.txt
muß eine freigebende robots.txt liefern,
http://www.domain.ch/robots.txt
eine gesperrte.
Man muß darauf achten, daß hinter der letzten Textzeile immer noch ein Return eingefügt wird, das sieht der Standard vor.
Das
QUOTE User-agent: *
Disallow: www.domain.ch
Disallow: domain.ch
Allow: www.blog.domain.ch
Allow: blog.domain.ch
ist nix robots - in einer robots.txt gibt es nur Pfadangaben, keine Domainangaben. Das würde bsp. eine Datei /www.domain.ch.html oder einen Ordner /www.domain.ch/ ausschließen.
Kreative Ideen braucht man dazu nicht, das ist einfach nur der robots-Standard.
Und der besagt, daß die Lösung von @Jürg richtig ist. Die Sache läßt sich auch einfach im Browser testen:
http://blog.domain.ch/robots.txt
muß eine freigebende robots.txt liefern,
http://www.domain.ch/robots.txt
eine gesperrte.
Man muß darauf achten, daß hinter der letzten Textzeile immer noch ein Return eingefügt wird, das sieht der Standard vor.
Das
QUOTE User-agent: *
Disallow: www.domain.ch
Disallow: domain.ch
Allow: www.blog.domain.ch
Allow: blog.domain.ch
ist nix robots - in einer robots.txt gibt es nur Pfadangaben, keine Domainangaben. Das würde bsp. eine Datei /www.domain.ch.html oder einen Ordner /www.domain.ch/ ausschließen.