gpt4 book ai didi

ruby-on-rails-4 - 在 robots.txt 中阻止 ?page=

转载 作者:塔克拉玛干 更新时间:2023-11-03 02:34:39 24 4
gpt4 key购买 nike

<分区>

基本上,Google 正在尝试为成千上万篇看起来像这样的文章编制索引:

/questions/are-eggs-bad-for-you?page=69

由于我的分页和无限滚动,网址范围从 page=1page=99

如何在我的 robots.txt 文件中只包含 url 的 ?page= 部分,这样它就不会用页码索引任何内容?

不确定在这里问这个问题是否合适,但我很难找到答案。谢谢。

24 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com