Page 1 of 1

whois.sk sucht robots.txt??

Posted: 2007-11-05 12:38
by crossi
Hallo Forum,

ich bin ziemlich neu in Sachen Root-Server. Habe einen bei 1&1 gemietet. Beim durchforsten der confixx-logfiles bin ich auf folgenden Eintrag gestoßen:
[Mon Nov 05 12:05:17 2007] [error] [client 216.145.11.94] File does not exist: /srv/www/confixx/html/robots.txt, referer: http://www.whois.sc/
Ist das gut, oder schlecht, oder wie, oder was? Ich kann mir nicht vorstellen, dass ich unter /srv/www/confixx/html tatsächlich ein robots.txt anlegen muss, oder?!

Wie gesagt, ich bin blutiger Anfänger in Sachen Rootserver, deshalb bitte ich um Verständnis, wenn ich mal die ein oder andere "dumme" Fragen stellen sollte. :)

MfG
Chris

Re: whois.sk sucht robots.txt??

Posted: 2007-11-05 12:49
by oxygen
musst du nicht. kannst du aber, da es sogar Sinn macht.

Re: whois.sk sucht robots.txt??

Posted: 2007-11-05 12:56
by crossi
wow .. das ging aber schnell :)

Danke für die schnelle Antwort!

Und was empfiehlst Du, wie die aussehen sollte? Einfach alles und jeden ausschließen?

Gruß
Chris

Re: whois.sk sucht robots.txt??

Posted: 2007-11-05 12:58
by Joe User

Code: Select all

User-agent: *
Disallow: /

Re: whois.sk sucht robots.txt??

Posted: 2007-11-05 13:01
by crossi
Genau, so hatte ich mir das auch gedacht.

Vielen Dank für Deine Hilfe! :)

Gruß
Chris