gpt4 book ai didi

c# - 基于 .Net 的网络爬虫示例

转载 作者:行者123 更新时间:2023-11-30 20:13:39 25 4
gpt4 key购买 nike

我正在使用 VSTS 2008 + C# + .Net 3.5。我想找到一个工具(开源)来抓取一个网站的所有网页,以及该网站链接的任何其他域页面,我想跳过抓取它们(我只需要这个特定域的页面仅有的)。对于抓取的网页,我想将它们存储到本地文件目录中。

有任何示例或准备使用的开源工具吗?

最佳答案

Arachnode.net可能正是您正在寻找的。

关于c# - 基于 .Net 的网络爬虫示例,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/1439968/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com