Пакунок: libwww-robotrules-perl (6.02-1)

[ Source: libwww-robotrules-perl  ]

База даних отриманих з robots.txt дозволів

WWW::RobotRules здійснює розбір файлів /robots.txt відповідно до стандарту "A Standard for Robot Exclusion" ("Стандарт винятків для роботів"). Веб- майстри можуть використовувати файли /robots.txt для заборони програмам- роботам відвідувати певні частини їх сайтів.

Оброблені файли зберігаються в об’єкті WWW::RobotRules, який надає методи для перевірки дозволів доступу для вказаного URL. Той самий об’єкт WWW::RobotRules може використовуватись для обробки одного чи кількох файлів /robots.txt на будь-якій кількості хостів.

Tags: Software Development: Perl Development, Бібліотеки, Implemented in: Perl, Role: Shared Library

Інші пакунки пов'язані з libwww-robotrules-perl

• dep: liburi-perl

  Модуль для керування та доступу до URI-рядків

• dep: perl

  Мова Практичного Видобування та Побудування Звітів Лари Уолла (Larry Wall)

Завантажити libwww-robotrules-perl

Завантаження для всіх доступних архітектур

Архітектура	Розмір пакунка	Розмір після встановлення	Файли
all	12.6 kB	36.0 kB	[список файлів]