python - 从只有登录后才可用的网站获取受限数据

Question

我一直在尝试从 www.trademap.org 下载数据导出数据有 HS2、HS4 和 HS6 格式。一个HS2又分为很多HS4，HS4又分为HS6。

我已经能够使用 beautiful soup 提取网页上的数据。问题是我想要 HS6 级别的数据，而无需登录数据，直到 HS4 可用为止。

为了解决这个问题，我需要首先从 python 登录 trademap。

谁能告诉我这怎么可能吗？

我从中获得帮助的代码之一是:

from webbot import Browser 
web = Browser()
web.go_to('www.trademap.org') 
web.click('Login')
web.type('example@gmail.com' , into='ctl00$PageContent$Login1_UserName')

web.type('examplepassword' , into='ctl00$PageContent$Login1_Password' , id='PageContent_Login1_LabelPassword') # specific selection
web.click('ctl00$PageContent$Login1_Button',id='PageContent_Login1_DivButton')

但这对我不起作用

Answer 1

尝试使用 this question 中描述的代码显然，还有答案所做的更正。