Forum Webscript.Ru

Программирование => Perl => Тема начата: koder20005 от 05 Мая 2007, 12:22:18

Название: LWP::RobotUA
Отправлено: koder20005 от 05 Мая 2007, 12:22:18

А можно как-неибудь отключить, чтобы робот не смотрел robots.txt
???

Название: LWP::RobotUA
Отправлено: arto от 05 Мая 2007, 13:37:13

$ua->rules
$ua->rules( $rules )

    Set/get which WWW::RobotRules object to use.