- html - 出于某种原因,IE8 对我的 Sass 文件中继承的 html5 CSS 不友好?
- JMeter 在响应断言中使用 span 标签的问题
- html - 在 :hover and :active? 上具有不同效果的 CSS 动画
- html - 相对于居中的 html 内容固定的 CSS 重复背景?
我需要抓取一个具有 AJAX 和 SESSIONS 的网站表单(即时)。我做了很多研究,发现了几种可能的解决方案,其中之一是 Python::Mechanize。我不知道单独用于 PHP
的 python 和 cURL(根据我的理解)无法处理 AJAX 或提交表单。
我发现我认为可能的堆栈可以引导我走向优雅 :)。问题是我根本不知道如何使用这些包。
我下载并安装了 NODEjs,我可以从 cmd 调用它。 (很棒)
我下载并安装了 PhantomJS(不确定如何设置 PATH
以便它是动态的,所以我必须在 CMD 中手动 cd
到 DIR
让它加载)我如何在 Windows 7 中设置它?不确定将路径指向何处。
下载 CasperJS - 放入 DIR
因此,在 phantomjs 上,我能够运行一个测试文件,该文件在 CMD 提示符下回显“hello world”。现在我不知道如何进行。 - 最终我需要它从我的网络服务器运行(即时) - 所以它需要在我的网页中实现。截至目前,我只想从 CMD 运行它并让它转到页面、提交表单、抓取结果并将其写入文件。
有人可以解释一下我如何完成这个的工作流程吗?
CasperJS -> 显示了这个表单示例。我想用我的变量来实现,运行脚本并保存结果。
casper.start('http://some.tld/contact.form', function() {
this.fill('form#contact-form', {
'subject': 'I am watching you',
'content': 'So be careful.',
'civility': 'Mr',
'name': 'Chuck Norris',
'email': 'chuck@norris.com',
'cc': true,
'attachment': '/Users/chuck/roundhousekick.doc'
}, true);
});
casper.then(function() {
this.evaluateOrDie(function() {
return /message sent/.test(document.body.innerText);
}, 'sending message failed');
});
casper.run(function() {
this.echo('message sent').exit();
});
最佳答案
安装 PhantomJS 后执行下一步:
现在您可以从您的 CMD 使用 phantomjs。例如:phantomjs c:\mywebsite\with\ajax\dopescript.js
完成这些步骤后,下载 CasperJS 并将其放入 PhantomJS 文件夹例如:c:\phantomjs\casperjs
对 CasperJS 的 PATH 变量执行前面的步骤(在末尾加上\bin)例如:c:\phantomjs\casperjs\bin
从 CMD 尝试 casperjs。
如果它不工作,请转到 casperjs 文件夹中的 batchbin 目录并午餐 casperjs.bat
现在尝试从此文件夹调用 CasperJs。 (为我工作)
所以现在您应该拥有 PhantomJS + CasperJS。
关于保存结果:
将此 var fs = require('fs');
放在脚本的开头并调用
fs.write('result.html', myData);
其中 myData
是您需要保存的数据。
这里是关于 FS 的更多信息: PhantomJS File System
关于javascript - 如何在 Windows 7 上使用 NodeJS/PhantomJS/CasperJS,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/12650274/
我正在尝试开始使用 Mermaid CLI,但是当我尝试针对我的源文件运行它时,它说找不到 phantomjs。 (我运行的是 Win 7 64。) C:\Users\Chris\Documents>
我正在使用PhantomJS来调用网页,如下所示: page.open('http://example.com', function (s) { console.log(page.content)
如果有这样的功能,我需要更改Phantomjs自动清除缓存的默认时间。有什么想法吗? 最佳答案 应该是您正在寻找的功能: https://github.com/ariya/phantomjs/issu
我想从我的程序运行 PhantomJs 脚本,但由于脚本可能不是我写的,我需要确保 PhantomJs 在执行完成或因任何原因(例如无效语法、超时、 ETC)。到目前为止,我读到的所有内容都说你必须始
在 Package JSON 中,我尝试了许多不同版本的 karma-phantomjs-launcher、phantomjs,包括 phantomjs-prebuilt。 当前包 JSON “开发依
我的脚本有一些语法错误,但 PhantomJS 没有显示任何错误,而是没有显示任何内容。如果脚本有错误,为什么 Phantom JS 不显示解析错误? 在以下 PhantomJS 脚本(通过 Wind
我有一些需要填写的动态输入表单。问题是要填写表格,我需要访问另一个页面以获取取决于上一页输入的数据。因此,在我获得数据然后返回表单后,表单已经更改,因此我需要在获取数据时保持该表单打开。那么问题是如何
PhantomJS 在为我捕获网页到图像文件方面做得很好。我正在使用基于 rasterize.js 的脚本。 但是,对于某些固定大小的 Web 元素,我需要生成的图像与 Web 元素的大小相匹配。 例
我正在将 PhantomJS headless 浏览器集成到我的一个项目中(目前使用 1.6 版)。在大多数情况下,它在完成我需要完成的工作方面做得很好。但是,WebPage.open() 调用工作方
是否可以在page.evaluate中传递变量? function myFunction(webpage, arg1, arg2){ var page = require('webpage').cre
有没有办法始终如一地检测 PhantomJS/CasperJS?我一直在处理用它构建的一系列恶意垃圾邮件机器人,并且能够根据某些行为基本上阻止它们,但是我很好奇是否有一种坚如磐石的方法来了解 Casp
有没有办法拦截资源请求并直接从处理程序给出响应?像这样的事情: page.onRequest(function(request){ request.reply({data: 123}); });
phantomjs 有配置 loadImage, 但我想要更多, 如何控制phantomjs跳过下载某种资源, 比如css等... ===== 好消息:已添加此功能。 https://code.goo
我正在尝试在 PhantomJS (2.1.1) 的 page.evaulate() 调用中使用 WebSocket。当尝试连接到 WebSocket 服务器时,出现以下错误: 安全错误:DOM 异常
我正在使用 PhantomJS 1.8,但遇到了一个限制——您无法指定它用于磁盘缓存的目录。我将其添加到他们的问题跟踪系统中,但由于以前没有它,所以我不希望它很快添加。 因此,我正在寻找解决此限制的方
我想渲染一个仅在用户滚动页面时加载图像的页面。仅设置 page.scrollPosition 没有任何效果。我需要一些可以随时间改变滚动位置的东西。 最佳答案 不确定这是否是最好的方法,但它确实有效。
我正在尝试使用 PhantomJS 设置远程调试,但运气不佳。我按照 https://github.com/ariya/phantomjs/wiki/Troubleshooting 上的说明进行操作。
在 PhantomJS 中,webpage.open 会使用状态参数设置为“成功”或“失败”的回调。根据文档,如果没有发生网络错误,则“成功”,否则“失败”。有没有办法查看导致失败的底层网络错误? 当
有什么方法可以使用 phantomjs 请求资源并能够到达响应的主体吗? 最佳答案 更新:关于“获取并使用所有其他资源(如图像、CSS、字体等)做某事”的其他可能含义,我最近在博客上写了 how to
在运行 PhantomJS 提供的 rasterize.js 示例时,我发现我必须等待 20 秒或更长时间才能生成网页图像。 有没有可能在不消耗大量资源的情况下加快速度的方法?我基本上希望快速生成从加
我是一名优秀的程序员,十分优秀!