Mysql
 sql >> Datenbank >  >> RDS >> Mysql

Speichern von Tabellendaten, die beim Scrapen einer Webseite mit Casperjs erhalten wurden

Ich verwende nur den zweiten Fall:

Erstens:Holen Sie sich die Informationen, die in einer globalInfo-Variablen gespeichert sind

var globalInfo;
casper.thenOpen("www.targetpage.cl/valuableInfo", function() {
    globalInfo = this.evaluate(function(){
       var domInfo = {};
       domInfo.title = "this is the info";
       domInfo.body  = "scrap in the dom for info";
       return domInfo;
   });
});

Zweitens:Besuchen Sie eine Seite, um die erfassten Daten zu speichern

casper.then(function(){
   casper.thenOpen("www.mipage.com/saveIntheDBonPost.php", {
      method: 'post',
      data:{              
          'title': ''+globalInfo.title,
          'body': ''+globalInfo.body
      }
   });
});

www.mipage.com/saveIntheDBonPost.php übernimmt die Daten in $_POST Parameter und speichert ihn in einer DB.