Spidr

"scenarijus gali paleisti viename puslapyje, svetainės, keliose srityse ar net non-stop.
Spidr yra skirtas būti greitas ir paprastas naudoti

Įranga .

• Atkurti spidering eilę ir istoriją iš ankstesnės sesijos .
• Custom User-Agent eilutes.
• Individualizuotos tarpinio serverio nustatymus.
• https parama.


• taip: "
• žymes.
• iframe žymės.
• karkasiniai žymes.
• Slapukų saugomos nuorodos.
• HTTP 300, 301, 302, 303 ir 307 nukreipimai.
• Meta Atnaujinti nukreipimai.
• bazinės HTTP autentifikavimo saugomos nuorodos.


• juodasis sąrašas arba balta-URL adresus, pagrįsti: "
• URL schema.
• Host "
• Uostas skaičius;
• Visas nuorodą,
• URL pratęsimo;


• Teikia skambučių-backs už:
• Kiekvienas aplankė puslapį.
• Kiekvienas aplankė adresas.
• Kiekvieną aplankytą tinklalapį, kuris atitinka tam tikrą modelį.
• Kiekvienas kilmę ir paskirties vietą URI nuorodą.
• Kiekvienas URL, nepavyko aplankyti.


• Teikia veiklos metodus: "
• Pauzė spidering.
• Pereiti puslapių apdorojimą.
• Pereiti Nuorodų apdorojimą.

Kas naujo , šioje laidoje:

• Sugavimo OpenSSL :: SSL :: SSLError išimtis, kai pradėta HTTPS posėdžiai.