googlebot

... je v februaru (od 1.2.2005 do 12.2.2005) naredil na moji strani 52 mega prometa. kak se tega hudiča znebim oziroma omilim. nočem da požere več kot msnjev bot (6 mega). od kje si jemlje pravico da mi tolko bandwidtha odžira?

sicer sem naredil en ip restrict ampak ziher ne deluje le iz enega ipja.. :>

mah. sej celega sajta tudi nebi rad zblokiral. samo nočem da mi gugl dela tolko prometa. to se mi zdi nenormalno.
zgleda da bom moral lepo enga po enga od teh gugl botov, ip restrictat dokler jih ne ostane še samo enih par.
ker če bi robots.txt spreminjal, potem bi moral vsakič znova spreminjat zadevo, ko se spremeni stran.

hja..... najdi.si SPLOH ne uposteva robots.txt.

In potem se cudijo, ce zablokiras njihov celotni IP naslovni prostor....