string - 将字符串输入公式字段并获取结果文本的最佳非交互式方法

Question

在一些website我有权访问，有一些输入字段。在第六个字段中，我需要从 10000 个字符串的列表中输入一些输入字符串，然后会出现一个新页面，为此我只需要计算行数。最后我想得到一个包含两列的表，例如输入字符串和结果行数。由于我必须手动输入所有不同的 10000 个字符串的信息，因此我想知道将字符串输入通用公式字段并获取结果文本的最佳方法是什么。我听说过 curl，但我不确定这是否是最简单的。

附言互动方式的例子:我在谷歌搜索中输入一些字符串或单词，然后我得到一个包含搜索结果的新页面。之前我已经介绍了我的谷歌用户名和密码，所以结果可能会根据我的个人资料进行过滤。

非交互方式示例:脚本以某种方式介绍我的用户信息、搜索查询并将搜索结果保存到某个文本文件。想象同样的想法，但对于像 this 这样更复杂的网站.

Answer 1

您要做的是发送一个包含特定数据的 HTTP POST。这可以使用任何适当的 HTTP 客户端代码来完成，其中之一是 libcurl (或 pycurl 绑定(bind)，甚至使用 curl 命令行工具)。在帖子的响应中，您可能会得到重定向，然后得到结果，或者您需要对结果进行单独的请求，然后完成并返回进行下一个 POST。重复直到完成所有 POST。

您可能需要考虑的是，您可能必须处理 cookie，并且可能需要遵循来自 POST 的重定向。一个好的方法是像使用浏览器(使用 firebug 或 LiveHTTPHeaders 等)一样记录“手动 session ”，然后使用该记录帮助您使用 HTTP 客户端重复同样的事情。

可以在此处找到有关此类工作的一些入门详细信息的体面教程:http://curl.haxx.se/docs/httpscripting.html