Www :: robot. Un motore traversale Web configurabile
Scarica ora

Www :: robot. Classifica e riepilogo

Www :: robot. Tag

ragnatela perl Robot robot web. motore di attraversamento web agenti web

Www :: robot. Descrizione

Un motore traversale web configurabile Www :: Robot è un motore traversale web configurabile (per robot e agenti Web) .Synopsis Utilizzo www :: Robot; $ robot = nuovo www :: robot ('nome' => 'myrobot', 'Version' => '1.000', 'Email' => 'fred@foobar.com'); # ... Configurare l'operazione del robot ... $ robot-> run ('http://www.foobar.com/'); questo modulo implementa un motore traversale Web configurabile, per un robot o un altro agente web. Data una pagina Web iniziale (URL), il robot otterrà il contenuto di quella pagina ed estrae tutti i collegamenti sulla pagina, aggiungendoli a un elenco di URL da visitare. Leatures del modulo robot includono: * Segue il protocollo di esclusione del robot . * Supporta le estensioni proposte dell'elemento Meta al protocollo. * Implementa molte delle linee guida per gli scrittori robot. * Configurabile. * Build on standard perl 5 moduli per www, http, html, ecc. Una particolare applicazione (istanza del robot) deve configurare il motore usando i ganci, che sono le funzioni perl invocate dal motore robot in punti specifici nel loop di controllo. Motore obbedisce al protocollo di esclusione del robot, nonché un'aggiunta proposta. Vedere "Vedi anche" per riferimenti ai documenti che descrivono il protocollo di esclusione del robot e i robot Web. Requisiti: · Perl.

Www :: robot. Software correlato