[Date Prev][Date Next][Thread Prev][Thread Next][Date Index][Thread Index]

Re: Was soll man davon halten?



Hi,

Simone Demmel wrote:
> Gunnar Anzinger wrote:
> > 
> > On Tue, 2 Jul 96 20:59:43 MET, Hubert Weikert wrote:
> > 
> > >Deswegen die Frage: Welche Bereiche lassen wir abscannen, welche sperren
> > >wir?
> > >Mein Vorschlag: Nur die Leitseite wird freigegeben, der Rest nicht.
> 
> 
> konkrete technische Frage dazu: magst du die derzeit ca 2.500 web-Rabots
> rausfischen und im Server sperren? Ach ja, pro Woche kommen da
> wahrscheinlich noch ein bis zwei hinzu, weiterhin benoetigen wir dann

Neko... "/robots.txt".

gert

-- 
The Internet is *full* - go away!

                                                            //www.muc.de/~gert
Gert Doering - Munich, Germany                             gert@greenie.muc.de
fax: +49-89-3545980 <---new!!!              gert.doering@physik.tu-muenchen.de