Ce petit script permet de prendre en note les robots qui passent sur le site.
Le principe est assez simple: on simmule un fichier robots.txt. Pour ce faire, il suffit de créer un dossier de ce nom et d'y placer un index.php contenant le script de log. Lorsque les robots iront chercher le fichier robots.txt, le serveur exécutera le fichier robots.txt/index.php et renverra le contenu d'un fichier robots.txt normal (configurable dans le code).