[openstandaarden] mailinglist

[Andy Goossens]

On Saturday 20 April 2002 10:52, Marc Leeman wrote:
> > en een /robots.txt bestandje maken
> > hoe dit moet, kan je vinden op onze vriend google
>
> Euhm, OK.
> Maar houden onze vrienden van de e-mail harversters zich wel aan die
> conventies in een robots.txt bestand? That is the question...
> (ik heb ook al een robots.txt moeten gebruiken om te vermijden dat
> !$%!$#^!~ die mannen mijn site dl'en (+1.5 Gb) gr.

De hardnekkige e-mail harvesters worden daarmee niet tegen gehouden. Maar 
heeft het nut dat de GoogleBot bvb in de mailinglist kruipt?

-- 
Andy Goossens -- andygoossens at softhome dot net

"Use the Source, Luke..."