gpt4 book ai didi

robots.txt - 我可以将 `robots.txt` 文件用于我学校域中的子目录吗?

转载 作者:行者123 更新时间:2023-12-04 05:50:25 29 4
gpt4 key购买 nike

我拥有一些在大学注册的网站空间。不幸的是,谷歌在该网站上找到了我的简历(简历),但错误地将其索引为学术出版物,这在谷歌学术上搞砸了引用计数之类的事情。我尝试上传 robots.txt进入我的本地子目录。问题是谷歌忽略了这个文件,而是使用为学校域列出的规则。

也就是说,网址看起来像

www.someschool.edu/~myusername/mycv.pdf



我上传了一个robots.txt,可以在这里找到

www.someschool.edu/~myusername/robots.txt



谷歌忽略了它,而是使用 robots.txt对于学校的域

www.someschool.edu/robots.txt



如何让 Googlebot 忽略我的简历?

最佳答案

遗憾的是,robots.txt定义为当您GET /robots.txt 时得到的任何东西,因此您不能将其用于您的子目录。

您可以做的是使用 X-Robots-Tag HTTP header ,如果您可以使用自定义 .htaccess文件。这是Google's documentation on X-Robots-Tag .

关于robots.txt - 我可以将 `robots.txt` 文件用于我学校域中的子目录吗?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/10131538/

29 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com