| Autor | Zpráva | ||
|---|---|---|---|
| blizz_boz Profil |
#1 · Zasláno: 3. 7. 2010, 14:50:45
Existuje nejaký príklad akým spôsobom sa pohybuje, vyhľadávací robot na stránkach? Zaujíma ten algoritmus ideálne keby ste mali nejaký príklad v C# alebo v Jave Chcel by som si naprogramovať vlastného robota, niečo som už skúšal ale rieśil som to rekurzívnou funkciou ale nie som s ním spokojný, funguje to tak že robot si ukladá stránky na ktorých už bol aby sa na ne nevracal problém je v tom že čím viac stránok robot prejde tým viac pamete zaplní čo nie je ideálne pretože to môže skončiť nedostatkom pamäte.
|
||
| janbarasek Profil |
#2 · Zasláno: 3. 7. 2010, 15:20:00
blizz_boz: Třeba tady: http://php.vrana.cz/verze-php-v-cr.php, je článek o tom, jak robot sbíral údaje o serveru, tam je napsáno i jak.
|
||
| jenikkozak Profil |
#3 · Zasláno: 3. 7. 2010, 16:18:40
janbarasek:
Na uvedené stránce robot pouze prochází adresy uvedené v databázi, není v něm napsáno, jak procházet stránky, na nichž ještě nebyl. |
||
| janbarasek Profil |
#4 · Zasláno: 3. 7. 2010, 17:07:15
jenikkozak: v tom článku asi ne, ale na tom webu jsem to někde viděl, jak je to udělané, myslím že přes webcron.
|
||
|
Časová prodleva: 3 dny
|
|||
| Vojtíšek Profil * |
#5 · Zasláno: 6. 7. 2010, 16:30:08
janbarasek:
„v tom článku asi ne, ale na tom webu jsem to někde viděl, jak je to udělané, myslím že přes webcron.“ A nevíš kde přesně? |
||
| xmark Profil |
#6 · Zasláno: 6. 7. 2010, 16:36:58
blizz_boz:
Čo si predstavujete pod takým pojmom "tým viac pamete zaplní"? Nenapadá mě jiná použitelná možnost, než ke zpracování dat (vč. ukládání navštívených webů) využít databázi. Kolik miliónů adres hodláš procházet? janbarasek: Jak přesně souvisí otázka "jak procházet stránky, na nichž ještě nebyl" s webcronem? Co kdybys svoje rady zredukoval na témata, kterým rozumíš? |
||
|
Časová prodleva: 14 let
|
|||
0