Obtenir les infos d'une page AJAX d'un site exterieur

Bonjour à toutes et tous!

Voilà, pour le boulot, je fait une petite application qui permet de récupérer automatiquement les informations d'un concurrent sur son site internet, ce qui est légal. Et je fait cette application en PHP et JavaScript.

Mon problème est que si j'inclu la page avec un "include", il fait donc partie de ma page et de mon site, mais dans la page appelée, il y a des appels de page JavaScript qui contiennent les fonctions, et donc tous les appels de JavaScript sont impossible. Y a-t-il un moyen de contourner?


Je vous remercie d'avance!

Roro

Je pense que tu as déja de la chance qu'ils n'aient vu que tu piquais des infos. N'en demandes-tu pas un peu trop ? Si cela avait été moi, d'une tu ne serai plus redirigé vers le site mais en plus je pense que je t'enverrais vers une page avec des infos totalement fausses, histoire que tu n'y vois que du feu.
S.

Salut!

Je comprend que ça paraisse bizarre de vouloir faire ça, mais c'est légal. C'est juste une automatisation d'une récupération manuelle! Je ne récupère que ce qui est affiché, rien de plus. Car franchement, mettre quelqu'un qui se connecte à chaque page et qui récupère les infos à la main, je sais pas si t'aurais envie de faire ça...^^
Mais bon, merci de ce message...
Si d'autres personnes on des idées pour m'aider?

Merci d'avance!

Roro

Bonsoir,

Un include avec intégration d'une page d'un concurrent..

Et puis quoi encore !

La veille technologique est là pour empêcher ce genre de "information sucking"... On siat reconaitre un vrai navigateur d'un robot, qu'il soit en PHP, Perl ou JavaScript..

Que tu piques manuellement des infos, passe encore, mais que tu veuilles de l'aide pour aider à en faire un data sucker, là je ne pense pas qu'ici qui que ce soit qui ait ne serait-ce qu'un semblant de déontologie pro voudra t'aider !

Rhaaa !! T'as pas compris le monsieur.. c'est LEGAL.. Biensur, connaissant 'un peu' le droit je vais m'éviter de répondre, mais il faudrait juste voir s'il est d'acord pour qu'on lui pompe son site.. LOL !!

LEGAL n eveut pas dire déontologique... nuance de poids, et de poids très fort.

Alors stoppons la polémique.. Un partenaire qui accepte ces conditions te donne les infos techniques pour pomper les infos, un "partenaire inconscient" ne risque pas de te les donner, mais risque très fort de te poursuivre devant les tribunaux.

Je connais aussi assez bien le droit informatique..

Salut,

Merci de cette polémique avortée...
Mais ce site n'est pas là pour ça.
Puisque personne veut aider, tant pi.
Je sais que c'est pas "déontologique", mais la grande distribution s'en fout totalement de la "déontologie"... Citez-moi UNE seule enseigne qui est totalement clean! Aucune, alors votre déontologie, c'est bien beau, mais ça existe pas dans le commerce. Notre concurrent le fait chez nous, alors nous considérons qu'il est d'accord pour qu'on le fasse chez lui...
Allez, bravo pour tes deux messages de plus qui feront augmenter tes stats et qui ne servent strictement à rien dans mon sujet.

Si quelqu'un a une solution, merci de votre aide! Même en privé, histoire de ne pas se faire "lyncher" par les grands hommes qui respectent tout...

Cordialement,

Roro

Salut,

Je pense que tu devrais préciser le but de ton script :
Est ce pour inclure une page du concurrent sur le site de ta société et ainsi qu'elle soit visible par tes visiteurs (ou autre but relevant du pompage) ?
Est ce pour récupérer des données qui seront par la suite analysées par du personnel de l'entreprise, par exemple pour adapter une stratégie marketing ?

Je pense que la démarche est différente et dans le second cas je ne vois pas trop le problème.


Cordialement,

Kohntark -

Salut Kohntark,

En effet, c'est bien le second cas que je veut.
Je souhaite automatiser la récupération des données diffusées sur le site web du concurrent, donc visible par tous, pour les faire analyser par le personnel. Une pratique très courante de nos jours vu l'ouverture grâce à Internet.
Le problème est qu'il y a des pages chargées par AJAX, mais je ne vois pas trop comment faire pour afficher le reste de la page.

Merci beaucoup de votre aide,

Roro

Techniquement, pour accéder aux fonctions Ajax, il faut récupérer et utiliser le Javascript (en général des fonctions JQuery ou Mootools).

Si le code de service JQuery ou Mootools sur le serveur est laxiste (pas d'anti-leech, pas de gestion de sessions), ça peut fonctionner.

Si un anti-leech est en service, ça se complique sigulièrement.