On Thu, 9 Aug 2001 19:20:58 +0000 (UTC), Preben Nielsen
<visto@get2net.dk> wrote:
> > 1) Robots.txt fil
> >
http://www.html.dk/artikler/00003
> >
> >
> > Robots.txt metoden er nemmest at have med at gøre.
> >
> Tak!
> Indekserer robotterne også sider, der ligger på serveren, men som
> der ikke er links til fra index.htm og derudaf? - Altså hvis man
> har en midlertidig test-fil liggende, som der ikke linkes til fra
> de sider der ikke umiddelbart kan ses på webstedet?
For at siderne kan findes / indexeres, kræver det selvfølgelig at der
et eller andet sted findes en link til siden.
- men pas på, de kan komme de mest mærkværdige steder fra. Hvis du har
et billede på en "skjult" side, og billedet er nævnt i en
adgangs-statistik, kan side nogle gange også stå i statistikken, og
vupti kan robotterne finde dig alligevel.
> M.a.o. skal man også sørge for ar disse test-sider ikke
> indekseres af robotter?
Hvis der ikke er referencer, hverken ud eller ind, er der ingen måde
robotten kan komme ind på siden, hvis det er det du spørger om.
--
Venlig hilsen / Best regards
Henning
_H_P_C_o_n_s_u_l_t_ E-mail: mailto:henning.petersen@hpc.dk
Skoletoften 9, Blans Work:
http://www.hpc.dk
DK - 6400 Soenderborg Hobby:
http://www.dds.dk