gpt4 book ai didi

sitemap - 在 robots.txt 中同时列出站点地图和站点地图索引文件?

转载 作者:行者123 更新时间:2023-12-04 13:20:52 28 4
gpt4 key购买 nike

我的网站由 3 个主要部分组成:评论、论坛和博客。我有为论坛和博客自动生成站点地图的插件。论坛插件生成指向多个索引的站点地图索引文件,博客插件生成包含我所有博客内容的常规站点地图文件。以下是 robots.txt 中的条目:

Sitemap: http://www.datesphere.com/forum/sitemap-index.xml
Sitemap: http://www.datesphere.com/blog/sitemap.xml

我刚刚创建了一个包含评论部分中所有内容的评论 sitemap.xml 文件。我打算只在 robots.txt 中添加一行,所以整个事情看起来像这样:
Sitemap: http://www.datesphere.com/forum/sitemap-index.xml
Sitemap: http://www.datesphere.com/blog/sitemap.xml
Sitemap: http://www.datesphere.com/reviews-sitemap.xml

这是我的问题:我知道您可以在 robots.txt 中列出多个站点地图,但是是否可以列出站点地图索引文件以及多个站点地图?如果 Googlebot 在 robots.txt 中找到 sitemap-index.xml 文件,它会忽略其他站点地图文件吗?如果是这样,我是否必须将我的博客和评论站点地图放在另一个站点地图索引文件中,然后在 robots.txt 中列出?

我已经检查过了,但只能找到“我可以列出多个站点地图吗?”这个问题的答案。

最佳答案

即使您列出了它们的父站点地图索引,Googlebot 也不会忽略您在 robots.txt 中列出的任何站点地图。我们几乎遵循我们找到的每一个链接,如果我们被允许,我们会抓取它们。
就个人而言,我可能只列出站点地图索引,尽管只是为了便于管理,但这取决于您,如果您同时列出索引和站点地图,Googlebot 不会介意。

关于sitemap - 在 robots.txt 中同时列出站点地图和站点地图索引文件?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/6362942/

28 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com