gpt4 book ai didi

robots.txt - 为什么当我在 robots.txt 中阻止目录时,它的内容仍然出现?

转载 作者:行者123 更新时间:2023-12-03 13:03:19 25 4
gpt4 key购买 nike

这是我在我的 robots.txt 中得到的,当然放在基本目录中:

User-Agent: *
Disallow: /foo/

但是,在 Google 中,我没有 /foo/ 的索引,但出于某种原因,我仍然有 /foo/foo.php 显示为Google 中的链接。

怎么会?我写错了什么吗?我还需要写点别的吗?

最佳答案

当您在网站上线后放置 robots.txt 时,Google 已经可以在 /foo/ 下索引文件。

您可以通过 Google Webmaster Tools 删除已经索引的文件- 删除请求。

Removal Request

关于robots.txt - 为什么当我在 robots.txt 中阻止目录时,它的内容仍然出现?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/14131057/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com