[Date Prev][Date Next][Thread Prev][Thread Next][Date Index][Thread Index]

Re: (Re: http://www.spiegel.de/netzwelt/aktuell/somm_lee



At 23:34 02.06.98 +0200, Holger Veit wrote:
>> 
>> In schulung.lists.fitug-debate you write:
>> >    Mit Hilfe einer eigens entwickelten ,Crawler-Software" werde Nacht
>> >    für Nacht das World Wide Web (WWW) von einem Rechner nach
>> >    jugendschutzgefährdenden Internetseiten durchsucht, erklärte Petra
>> >    Müller, Länderbeauftragte der Stelle ,jugendschutz.net".
>> 
>> Hat jemand diese Suchmaschine schon in seinen Logfiles gesehen? Von wo aus
>> greift die zu?
>
>Wenn Du mir eine etwas praezisere Angabe machen kannst, dann grep'pe ich 
>die paar GB's gerne mal durch. Eine profane Suche nach -i jugendschutz
>hat zumindest nichts gefunden.
>
>Waere uebrigens ganz interessant, ob sich solche Software an robots.txt
>haelt - wenn nicht, waere das eigentlich ein Grund, solche Rowdies 
>pauschal auszusperren, unabhaengig davon, ob da tatsaechlich irgendwelcher
>jugendverderbende Kram ist ;-) Wofuer wurde sonst wohl robots.txt
eingefuehrt?

Hatte da nicht mal jemand ein Patentrezept, wie man durch rekrusives
verlinken Suchmaschinen aufs Glatteis führen kann?

Josef
-- 
Josef Dietl
W3C/INRIA
BP 93
F-06902 Sophia-Antipolis Cedex
France