Accueil > Forum > > > > parser le fichier robots.txt
 parser le fichier robots.txt
mercredi 22 mars 2006 à 11:49:26 |
parser le fichier robots.txt
anirbas
|
Safia  salut a tous, je voudrais creer un moteur de recherche en php et pour cela je dois faire en sorte k'il accede au fichier robots.txt s'il existe, avant de faire koi ke ce soit. Mon probleme est ke je voudrais parser les fichiers robots.txt de chake site ke je veux visiter. (tout cela en php .) je vous remercie d'avance. 
|
|
mercredi 22 mars 2006 à 13:12:52 |
Re : parser le fichier robots.txt
malalam
|
Hello,
eh bien essaye, et reviens avec un début de code si tu bloques.
Mais essaye d'abord... :-)
|
|
mercredi 22 mars 2006 à 20:54:01 |
Re : parser le fichier robots.txt
Anthomicro
|
Salut, pour récupérer un fichier distant tu peux utiliser fgets() avec un fsockopen(). Je te laisse regarder sur fr.php.net pour plus de détails...
|
|
Cette discussion est classée dans : fichier, ke, txt, parser, robots
 Répondre à ce message
 Sujets en rapport avec ce message
question concernant le fichier robots.txt ... [ par kamuikun ]
Bonjour, J'ai une question concernant le fichier robots.txt, qui permet d'indiquer au bots des moteurs de recherche quelles urls ignorer... En fait j
upload un fichier .txt [ par meusanland ]
bonsoir à tous depuis quelques année je développe différent site web via AS2 et AS3 cependant un client vient de me commander un site en HTML et en C
Ficher TXT dans mySql [ par crashfab ]
Bonjour tout le monde , je suis étudiant en IUT informatique et je dois créer pour mon projets un Générateur aléatoire de Mots Croisée , j'ai donc tel
Extension differente [ par shadow578 ]
Bonjour, Voilà j'ai fait un petit "explorateur" très rapide bien sur, mais je bloque à un moment, je voudrais que quand il y est l'extension ".txt" il
un micro forum avec fichier txt et reprise de déco [ par vegetalain ]
Salut, alors voilà, j'aurais besoin de mettre en place une sorte de micro-forum, qui ressemblerais à ça (simulation en html et 'toshop): http://vegeta
PHP - Extraire des chaîne par ligne dans un .txt [ par KolKOR ]
Bonjour,Je suis entrain de réaliser une enquête qualité d'une entreprise. Je demande à des client de remplir un formulaire afin de faire des statistiq
afficher le contenu d'un fichier .txt ligne par ligne [ par Sniark ]
Bonjour à tous,Je cherche à lire afficher le contenu d'un fichier .txt ligne par ligne. J'ai cherché sur google, mais n'ai rien trouvé en PHP. Pourtan
Comment elever les retour chariot textarea vers .txt [ par Dede013 ]
Bonjour,J'ai un petit soucis lors de l'enregistrement du contenu d'un dans un fichier texte:Je m'explique, le souhaite que le contenu du soit écrit
Creation de fichier $i++ [ par Neme6 ]
Bonjour a tous, Voila, je veux faire un script aui cree des fichiers type: $i.txt ou $i est un (int)Et a chaque creation, il verifie que $i.txt exis
Sondage php et résultats dans fichier txt [ par baraxev ]
Bonjour,Je viens de parcourir le forum, sans trouver la solution à mon problème... mais c'est probablement parce que je suis débutant en PHP :-(J'aime
 Livres en rapport
|
Derniers Blogs
 XNA IS DEAD!XNA IS DEAD! par richardc
Depuis la semaine dernière (et grâce aux TechDays 2012), je me penche activement sur la nouvelle version de Windows, aka Windows 8. Vous me direz, il était temps puisque la première preview date de Septembre dernier.
OK. Remarquez, on n'en est qu'aux...
Cliquez pour lire la suite de l'article par richardc TECHDAYS PARIS 2012 : WINDOWS SERVER "8" QUOI DE 9 !TECHDAYS PARIS 2012 : WINDOWS SERVER "8" QUOI DE 9 ! par ROMELARD Fabrice
Speakers: Fabrice Meillon et Stanislas Quastana Cette session est basée entièrement sur celle donnée lors de la BUILD cet hiver. Il n'y a pas d'ajout d'information en rapport avec cet évènement passé. Windows 8 Server sera intégralem...
Cliquez pour lire la suite de l'article par ROMELARD Fabrice [HTML5] AUTOUR DU W3C : NOUVEAUX STANDARDS ET WEB MOBILE (LILLE)[HTML5] AUTOUR DU W3C : NOUVEAUX STANDARDS ET WEB MOBILE (LILLE) par Gio
Je m'y prends un peu tard je sais, mais bon je suis développeur web et donc hyper fainéant ! Toujours dans le cadre des technologies émergentes, ici HTML5, parce qu'on aime HTML5 chez Wyg , nous seront présent, le vieux ( Aurélien V.) et moi, pour pr...
Cliquez pour lire la suite de l'article par Gio [WP7] DYNAMICALLY CHANGE STARTUP PAGE[WP7] DYNAMICALLY CHANGE STARTUP PAGE par KooKiz
Let's say that you want to allow the user to customize the startup page of your application. You can easily change the startup page by editing the 'NavigationPage' attribute in the manifest file. But the manifest cannot be modified once the applicatio...
Cliquez pour lire la suite de l'article par KooKiz
Logiciels
 DocTranslate (V3.1.0.0)DOCTRANSLATE (V3.1.0.0)DocTranslate est un traducteur de document Microsoft Word, PowerPoint et Excel. Il permet d'autom... Cliquez pour télécharger DocTranslate Tribler (2012)TRIBLER (2012)Tribler est un client pair à pair (P2P/Peer-to-Peer) open source avec la capacité de regarder des... Cliquez pour télécharger Tribler OneSwarm (2012)ONESWARM (2012)Le peer-to-peer qui protège votre vie privée, c'est OneSwarm.
Ce logiciel de peer-to-peer crypté... Cliquez pour télécharger OneSwarm PONAMEDIA PREMIUM - HELLLOOO FLASH DEMO (V8.4)PONAMEDIA PREMIUM - HELLLOOO FLASH DEMO (V8.4)PONAMEDIA TV DEVIENS HELLLOOO FLASH
LA TV SUR VOTRE ORDINATEUR.
Toute une plateforme Multi... Cliquez pour télécharger PONAMEDIA PREMIUM - HELLLOOO FLASH DEMO Academy System (17.2.1.0)ACADEMY SYSTEM (17.2.1.0)Logiciel de gestion des établissements.
- élèves/étudiants (inscription, dossier, absence...)
-... Cliquez pour télécharger Academy System
|