javascript - 从使用 javascript 填充的网站获取内容

Question

我使用“Simple Html Dom”抓取网站，但遇到问题。在检查页面时，我看到一个具有特定 id 的 div，但是当我检查源代码时，该 id 并未出现。

这意味着我的 simplehtmldom 库无法获取该 div 内的信息。

Answer 1

使用casper - 它是一个 js 库，而且非常简单:

casper.start('http://my.website.com/');

casper.waitForSelector("#plop", function() 
{
    this.echo("I'm sure #plop is available in the DOM");
});

查找更多@官方文档:http://casperjs.readthedocs.org/en/latest/modules/casper.html