[ sojic @ 29.05.2009. 22:19 ] @
| Radim neki mini "crawler" koji treba da radi sledece: Svakih 12/24 sata iz baze cita 100tinak rss-a. Koristim simplepie da "parsiram" rss, iz kojih vadim linkove. Onda svaki link (ako je nov, t.e. ako nije bio ranije parsiran), uz pomoc simplehtmldom "parsiram" originalnu stranu, i vadim potrebne podatke. E sed... Ovo stavnjam u cron na hosting serveru. Verujem da samo da "ucitam" 100 rss feeda, php execution time ce da "skida" izvrsavanje skripte. Neka ideja kako da odradim ovo, a da ne "opteretim" server? Recimo.... da to odradim na nekoliko puta... ali... kako da znam kad je prethodni proces zavrsen??? Imao sam ideju da "selektujem" po 10 rss feeda i to odradim 10 puta... ali izgleda kao glupa ideja. |