pa zavisi...pogledaj raw logove sta su googlebot i msnbot kupili pa napravi racunicu...uvek mozes da iskoristis robots.txt da ih malo "ohladis"...

vidim neko dupliranje linka od strane msn a vjerojatno i google no ne kužim kako ga je dobio jer se radi o običnim html datotekama bez ikakvih skripti:

primjer:
http://domena.com/registracija...ri/programiranje/optimizacija/

http://domena.com/registracija...ogramiranje/web-dizajn/pro.php

i tako u nedogled, izgleda da se vrti u krug

Meni je google prije tri dana napravio 50 000 učitavanja stranice?!?!
U log fajlovima se dobro vidi da je google bot. To mi je već napravio prvi put mjesec bana nakon što sam stranicu prijavio (01.2005) i to 13 000 učitavanja.
Stranica jeste malo veća ali nije ni 20% od onog što je u planu da se nadogradi. Srećom nemam ograničen promet ali opet 50 000 je previše.

iskreno ne znam što da napravim ždere bandwidth užasno samo na msn i google ovaj mjesec će otić 2gb, malo sam robots.txt porikatao da indeksira samo zadane direktorije pa ćemo vidjet iako je već bio msn ali opet u jednom navratu potrošio 50mb bandiwidtha

FYI pocetkom aprila se ocekuje PR update pa su deepcrawleri malo agresivni :)

a ne znam prevelika mi to agresivnost:), vjerojatno ja imam grešku negdje

Ah ti botovi. Sta je problem sto ti 1 GB mesecno ode na botove? Jedino ako imas neki bedni limit od 1.5 GB recimo, e onda je problem.

zato što stranica ima 50 fileova i posjetu od 30 ljudi dnevno:)