gpt4 book ai didi

python - 解析 HTML 无限滚动

转载 作者:行者123 更新时间:2023-12-01 05:34:10 25 4
gpt4 key购买 nike

我正在尝试解析无限滚动页面的 HTML。我想加载所有内容,以便我可以解析所有内容。我正在使用Python。有什么提示吗?

最佳答案

这些页面使用 AJAX 更新其 html。通常你只需要找到浏览器发送的新的AJAX请求,猜测AJAX url参数的含义并从API中获取数据即可。

API 服务器可能会验证 AJAX 请求的用户代理、引用者、cookie、oauth_token ...,请密切关注它们。

关于python - 解析 HTML 无限滚动,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/19512250/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com