Étiqueté : php

Fonction / Classe simple pour parser un robots.txt 0

Fonction / Classe simple pour parser un robots.txt

Voici une fonction simpliste pour gérer les fichiers robots.txt : class robots { function formatRobot($Instruction) { $Instruction=str_replace(« * », « .* », $Instruction); $Instruction=str_replace(« / », « \/ », $Instruction); return $Instruction; } function robot($robots, $url) { $block=false; foreach($robots as $RobotLine) {...