gpt4 book ai didi

web - 如何防止登台在搜索引擎中被索引

转载 作者:行者123 更新时间:2023-12-03 14:40:52 25 4
gpt4 key购买 nike

我希望我的登台网站不会被搜索引擎索引(首先是谷歌)。

我听说 Wordpress 擅长这样做,但我想成为技术不可知论者。

robots.txt 是否足够?我们希望保持匿名访问,让客户无需登录即可查看其网站。

我必须在每个页面上添加 nofollow 吗?

最佳答案

您可以通过在 apache conf 中全局添加以下设置来禁用此服务器范围,或者可以在 vhost 中使用相同的参数仅对特定 vhost 禁用它。

Header set X-Robots-Tag "noindex, nofollow"



完成此操作后,您可以通过验证返回的 apache header 来对其进行测试。
curl -I staging.mywebsite.com HTTP/1.1 302 Found Date: Sat, 26 Nov 2016 22:36:33 GMT Server: Apache/2.4.18 (Ubuntu) Location: /pages/ X-Robots-Tag: noindex, nofollow Content-Type: text/html; charset=UTF-8

关于web - 如何防止登台在搜索引擎中被索引,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/12197979/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com