npr Google napravi cashe sveke stranice sa svojim "robotom"
Npr es izgleda ovako http://webcache.googleusercont...p;ct=clnk&client=firefox-a u cashu , sad sve ovo je u nekoj bazi , gde verovatno postoji i nesto slicno keywordovima povezano sa odredjenom stranicom itd kako bi lakse nalazio ili korisiti neki bez sumlje izuzetan algoritam

Upravo kao sto si i sam rekao, on prvo pravi bazu i iz nje cita sve podatke i prikazuje rezultate...

Ako znas engleski, da ne bi sad ljudi ovde pisali nasiroko, baci pogled na ovaj link, to sam prvo iskopao:

http://www.webconfs.com/seo-tutorial/introduction-to-seo.php