gpt4 book ai didi

search - Sitemap.xml 或 Sitemap.html

转载 作者:塔克拉玛干 更新时间:2023-11-03 02:34:13 26 4
gpt4 key购买 nike

我正在开发一个网络应用程序。我想使用站点地图文件将站点提交给网络爬虫。

有很多方法可以做到这一点

  • 使用站点地图.xml
  • 使用 sitemap.html
  • 使用 urllist.txt
  • 使用压缩站点地图文件

我们需要做的就是在应用程序的根目录中添加这些文件之一。

我的问题是,其中哪个选项比较好用?

最佳答案

我会使用此处定义的 xml 站点地图 http://sitemaps.org/

Html 站点地图更适合用户导航,而 urllist.txt 似乎是提供指向 yahoo 的链接的旧方法。

上述站点上定义的格式的 XML 站点地图由 Google、Yahoo! 创建。和微软,并得到这三者的认可。

其他人不会造成任何伤害,但我相信最大的好处将来自 xml 站点地图。

至于压缩,这取决于你,如果你想节省你的带宽,然后 gzip 它但请记住,它在未压缩时不能大于 10mb。

关于search - Sitemap.xml 或 Sitemap.html,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/4489937/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com