python - 如何使用 FormRequest 发布具有多个同名输入的表单？

Question

我正在用 scrapy 编写一个网络爬虫来处理表单。问题是我遇到了一个包含大量同名输入的表单。标签如下:

<input type="text" name="CRN_IN" size="6" maxlength="5" ID="crn_id1" />
<input type="text" name="CRN_IN" size="6" maxlength="5" ID="crn_id2" />
<input type="text" name="CRN_IN" size="6" maxlength="5" ID="crn_id3" />

唯一区分它们的是 ID 属性。我想用一些数字填充 ID='crn_id1' 的人。然而，据我所知，scrapy 只能使用 from_response 方法中的 formdata 用 name 属性填充空白。谁能告诉我如何使用 from_response 方法来解决我的问题。或者还有其他方法可以解决(但在 scrapy 中)。非常感谢。

这是网站的部分 html 代码。 Input with same names

Answer 1

from_response 方法只是填充您想要请求的指定表单的输入参数的帮助器，但它仍然是 FormRequest您始终可以覆盖 formdata 参数来发送您自己的输入参数:

yield FormRequest.from_response(
    response=response,
    formdata={
        myinput='myvalue',
    }
)