Wie steht Ihr zu der Robots.txt

webdoktor

webdoktor

Angesehenes Mitglied
Hallo zusammen,

immer wieder wenn ich meine Statistik auswerte habe ich
sehr viel Zugriffe auf die 404-Fehlerseite und dies aus dem
grössten Grund, weil man die Robtos.txt abrufen will und die
bei mir nicht vorhanden ist.

Wie sieht es bei Euch aus, habt Ihr eine solche Robtos.txt für
die Suchmaschinen erstellt? Bringt dies was für die bessere
Positionierung bei Google & Co.?

Freue mich auf Euer Feedback!

Marco
 
Bis vor kurzen hatte ich nirgends eine robots.txt. Nach und nach rüste ich aber meine Seiten damit auf, weil ich keinen Wert lege über die Bilderdiebe-Suche gefunden zu werden. Für eine bessere Positionierung bringt das glaub ich nichts. Warum auch? In der Robots.txt steht ja nur drin welche Daten für die Spider verboten sind.
 
Hallo Rainer,

ich denke dann sagst du in robots.txt dass sie dein images verzeichnis
nicht aufnehmen dürfen.

naja in robots kannst du auch sagen das es eben alles aufnehmen darf
und evt. schauen einige suchmaschinen zuerst ob es eine solche robots.txt
gibt wenn nicht verlassen sie die seite gleich wieder. aus diesem grund habe
ich gefragt ob es evt. eine auswirkung auf die positionierung bei suchmaschinen
hat.

gruss marco
 
QUOTE ich denke dann sagst du in robot.txt dass sie dein images verzeichnis
nicht aufnehmen dürfen.


Richtig. :)


QUOTE evt. schauen einige suchmaschinen zuerst ob es eine solche robots.txt
gibt wenn nicht verlassen sie die seite gleich wieder.


Das glaub ich zumindest bei MSN, Yahoo und Google ganz sicher nicht. Sonst wäre ich da nicht drin, weil ich hatte zuvor jahrelang keine robobts.txt. Und die vielen kleineren Pseudo-Adsense-Spam-Suchmaschinen handeln glaube ich auch nicht so. Da habe ich auch schon oft meine URLs drin gefunden.
 
Hi,

wenn du auf deiner Webseite eine Sitemap hast und möchtest dass sie was bringt, kannst sie nur im Zusammenhang mit robots.txt benutzen.

Gruß _BOB_
 
Halllo _BOB_

nun ich habe eine Sitemap verstehe aber nicht wieso dies
nur was birngt wenn man eine Robots.txt benutzt.

Kannst Du mir dies kurz erklären.

Marco

@Rainer

jep ich bin auch überall in google usw. drin mich interessiert
es nur, ob Google evt. jrgendwie etwas mit der Robots.txt
macht welches einfluss auf das Ranking hat.

Marco
 
QUOTE nun ich habe eine Sitemap verstehe aber nicht wieso dies
nur was birngt wenn man eine Robots.txt benutzt.


Ich glaub er meint die Sitemap-Upload-Funktion von Google. Genaueres weiss ich auch nicht, da ich mich damit nicht auskenne. Wenn die Sitemap von irgendwo einen eingehenden Link hat dann klappt das schon. Den Zusammenhang mit der robots.txt verstehe ich auch nicht.
 
Hi Bob,

perfekter Link, vielen Dank für diesen tollen
Tipp!

Wünsche noch eine schöne Woche!

Marco
 
@webdoktor :

bin froh geholfen zu haben
rolleyes.gif


wünsche ebenfalls eine gute und stressfreie woche
 
Sie müssen sich einloggen oder registrieren, um hier antworten zu können.
Zurück
Oben