gpt4 book ai didi

html - 防止 Googlebot 频繁地重新索引某些页面

转载 作者:行者123 更新时间:2023-11-28 00:16:28 25 4
gpt4 key购买 nike

我们可以使用 robots.txt 更改机器人的抓取速度。但 Googlebot 不考虑 robots.txt,所以我寻找替代方法。

在我的站点中,我有一些页面变化非常非常频繁,变化很小。一天说20-30个字。但我不希望 Googlebot 频繁地重新索引它们。比如说,我希望 Googlebot 每个月都为它编制索引。是否可以使用这样的元标记来制作它:

<META HTTP-EQUIV="expires" CONTENT="Wed, 26 Feb 1997 08:21:57 GMT">

Googlebot 会忽略这个吗?或者你能推荐另一种解决方案吗?

最佳答案

我建议您生成一个 XML 站点地图。

站点地图允许您指定要传递给搜索引擎的参数,即您赋予页面的重要性(或权重)以及页面(通常)的更新速度。

这并不意味着搜索引擎只会坚持这一点。可能是您说该页面每年更新一次,那一年它被抓取了 3 次,或者它设置为每天,每月只被抓取一次。

Google on SiteMaps

关于html - 防止 Googlebot 频繁地重新索引某些页面,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/11918292/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com