pressé : récuperer une statistique sur une page html

pressé : récuperer une statistique sur une page html - PHP - Programmation

Marsh Posté le 08-11-2006 à 15:40:06    

Bonjour, je souhaite récuperer une donnée statistique sur une page html. Pour accèder à cette page html, je dois me logguer.
 
Est ce possible de réaliser cela avec php ? Est ce difficile ? pour info je suis débutant. Si ce n'est pas possible par php, quel langage utiliser ?
 
J'ai vraiment besoin rapidemment de réaliser ce script rapidemment pour un projet.
 
Merci beaucoup

Message cité 1 fois
Reply

Marsh Posté le 08-11-2006 à 15:40:06   

Reply

Marsh Posté le 08-11-2006 à 15:42:12    

Niko80 a écrit :

Est ce possible de réaliser cela avec php ?


oui

Niko80 a écrit :

Est ce difficile ? pour info je suis débutant.


moyen on va dire :o mais le plus simple c'est d'utiliser curl => http://fr.php.net/curl
 

Reply

Marsh Posté le 08-11-2006 à 15:47:26    

ou phpmyvisites...ICI.. sympa gratuit etoutetout.. :D
 
faut vraiment que j'arréte de lire en diagonale moi  :heink:


Message édité par chani_t le 08-11-2006 à 15:49:23
Reply

Marsh Posté le 08-11-2006 à 22:17:44    

merci.
 
ok ça n'a pas l'air évident évident, je vais chercher des informations sur curl ...  
 
est ce plus compliqué que de faire un script qui fait une screenshot du site internet, et un autre script qui fait une reconnaissance de caractères à des endroits précis de la page et qui me l'envoi ?

Reply

Marsh Posté le 08-11-2006 à 22:18:36    

Ouais, très compliqué

Reply

Marsh Posté le 08-11-2006 à 23:00:23    

Pourquoi curl tout le temps dès le départ :??:
Je suis pas sur d'avoir bien compris le besoin, mais je vois pas la nécessité de curl :spamafote:

Reply

Marsh Posté le 08-11-2006 à 23:16:13    

ok, je vais expliquer en détail.
 
1) Sur le net, il y a par exemple le site meteodumachin.com qui m'affiche dans un certain coin de la page la temperature de bidule. Cette donnée change toute les 20secondes.
 
2) Je souhaite "copier" cette donnée et la mettre sur une page privée perso. Je souhaite bien entendu copier toutes les 20secondes cette donnée afin d'avoir la donnée en continu.
 
voila...
j'ai regardé vite fait curl, c'est possible comme ça de localiser dans du code html un chiffre dans un endroit donné de la page..?
 
sinon leflos5 tu parlais d'une autre méthode ?

Message cité 2 fois
Reply

Marsh Posté le 08-11-2006 à 23:32:27    

Avec Curl on peut justement faire ce genre de truc... Connexion -> regexp à deux balles -> roulaize

Reply

Marsh Posté le 09-11-2006 à 05:41:41    

Niko80 a écrit :

ok, je vais expliquer en détail.
 
1) Sur le net, il y a par exemple le site meteodumachin.com qui m'affiche dans un certain coin de la page la temperature de bidule. Cette donnée change toute les 20secondes.
 
2) Je souhaite "copier" cette donnée et la mettre sur une page privée perso. Je souhaite bien entendu copier toutes les 20secondes cette donnée afin d'avoir la donnée en continu.
 
voila...
j'ai regardé vite fait curl, c'est possible comme ça de localiser dans du code html un chiffre dans un endroit donné de la page..?
 
sinon leflos5 tu parlais d'une autre méthode ?


J'avais pas compris ça comme ça, meaculpa :d

Reply

Marsh Posté le 09-11-2006 à 08:53:29    

Niko80 a écrit :

ok, je vais expliquer en détail.
 
1) Sur le net, il y a par exemple le site meteodumachin.com qui m'affiche dans un certain coin de la page la temperature de bidule. Cette donnée change toute les 20secondes.
 
2) Je souhaite "copier" cette donnée et la mettre sur une page privée perso. Je souhaite bien entendu copier toutes les 20secondes cette donnée afin d'avoir la donnée en continu.
 
voila...
j'ai regardé vite fait curl, c'est possible comme ça de localiser dans du code html un chiffre dans un endroit donné de la page..?
 
sinon leflos5 tu parlais d'une autre méthode ?


 
et ton site il balance pas un rss, avec les données que tu veux récupérer ? ce serait auquel cas bien plus simple

Reply

Marsh Posté le 09-11-2006 à 08:53:29   

Reply

Marsh Posté le 09-11-2006 à 08:53:36    

Ouais enfin moi j'ai conseillé curl parce qu'il parlait au départ de la nécessité de s'identifier, si c'est pas le cas un file_get_contents est beaucoup plus simple à utiliser [:petrus]

Reply

Marsh Posté le 09-11-2006 à 14:43:36    

Le pattern de base étant:
 
- post
- reception de cookie ( facultatif )
- redirection javascript ( pourquoi tous les developpeurs utilisent ca ??? )
- page d'action
 
Avec une interface et un formulaire de preg_match tu spam ce que tu vx.
 

Code :
  1. <?php
  3. function httpPostRequest($host, $path, $arrPostvars, $port=80, $referer="" )
  4. {
  5.   $arrEncodedPairs = array();
  6.   $res = "";
  8.   foreach ($arrPostvars as $var => $value)
  9.   $arrEncodedPairs[] = rawurlencode($var)."=".rawurlencode($value);
  10.   $postData = implode("&", $arrEncodedPairs);
  12.   $request = "POST $path HTTP/1.1\n".
  13.   "Host: $host\n".
  14.   (($referer) ? "Referer: $referer\n" : "" ).
  15.   "Content-type: application/x-www-form-urlencoded\n".
  16.   "Content-length: ".strlen($postData)."\n".
  17.   "Connection: close\n\n".
  18.   $postData."\n";
  21.   print("<pre>Request:\n".htmlentities($request)."</pre>" );
  23.   if ($fp = fsockopen($host, $port))
  24.   {
  25.     if (fputs($fp, $request))
  26.     {
  27.       while(! feof($fp))
  28.       {
  29.        $res .= fgets($fp, 128);
  30.       }
  31.       fclose($fp);
  32.       return $res;
  33.     }
  34.   }
  35. }
  37. function print_tab($tab){
  38. if(is_array($tab)){
  39. echo '<pre>';
  40. print_r($tab);
  41. echo '</pre>';
  42. }
  43. else{
  44.  $tab = array('La variable recue n\'est pas un tableau');
  45.  echo '<pre>';
  46. print_r($tab);
  47. echo '</pre>';
  48. }
  49. }
  51. $post=array(
  52. 'destination'=>'',
  53. 'username'=>'xxxxxxxxx',
  54. 'password'=>'xxxxxx'
  55. );
  56. $dood = httpPostRequest('www.blogger.com','/login.do',$post);
  58. $pattern = "@Set-Cookie\:(.*)@";
  59. $cookies = preg_match_all($pattern,$dood,$matches);
  60. $setcookie = $matches[1];
  63. print_tab($matches);die;
  65. //ecrire le cookie dans un fichier puis le renvoyer par la suite
  68. ...............


 
Je ne sais pas si il ya des ressources sur le Web.  => google très Constructif  
 
 
Tu pourras automatiser le truc en fonction des sites que tu crawl. Selon le site tu délegues la tache à la fonction appropriée
 
 
Utiles:
 
- preg_quote
- fopen
- header
- preg_match
- setcookie


Message édité par supermofo le 09-11-2006 à 15:02:12
Reply

Marsh Posté le 11-11-2006 à 16:18:48    

Non le site n'a pas de flux rss.
 
Merci beaucoup supermofo, je vais essayer de comprendre tout ça...

Reply

Sujets relatifs:

Leave a Replay

Make sure you enter the(*)required information where indicate.HTML code is not allowed