Paket: libwww-robotrules-perl (6.02-1)

[ Quellcode: libwww-robotrules-perl  ]

Aus den »robots.txt«-Berechtigungen abgeleitete Datenbank

WWW::RobotRules analysiert /robots.txt-Dateien, wie sie in »A Standard for Robot Exclusion« (<http://www.robotstxt.org/wc/norobots.html>) beschrieben sind. Webmaster können mit der /robots.txt-Datei standardkonformen Robots den Zugriff auf Teile ihrer Website untersagen.

Die analysierten Dateien werden in einem WWW::RobotRules-Objekt abgelegt und das Objekt stellt Methoden bereit, um die Zugangsberechtigung für eine gegebene URL zu überprüfen. Ein WWW::RobotRules-Objekt kann für beliebig viele /robots.txt-Dateien auf einer beliebigen Anzahl von Rechnern verwendet werden.

Markierungen: Software-Entwicklung: Perl-Entwicklung, Bibliotheken, Implementiert in: Perl, Rolle: Laufzeit-Bibliothek

Andere Pakete mit Bezug zu libwww-robotrules-perl

• dep: liburi-perl

  Modul für Zugriff auf und Manipulation von URI-Zeichenketten

• dep: perl

  Larry Wall's Practical Extraction und Report Language

libwww-robotrules-perl herunterladen

Download für alle verfügbaren Architekturen

Architektur	Paketgröße	Größe (installiert)	Dateien
all	12,6 kB	36,0 kB	[Liste der Dateien]