url-rewriting - Robots Meta Tag Noindex 是否删除索引 URL

Question

我们有一个大约有 15000 页的应用程序。为了更好的 SEO 原因，我们不得不更改 URL。谷歌之前已经抓取了所有这些页面，并且由于更改，我们在网站管理员上看到了很多重复的标题/元描述。我们对谷歌的印象下降了，我们相信这就是原因。如果我的假设不正确，请纠正我。现在我们无法使用 301 重定向为 URL 的更改编写正则表达式，因为更改就是这样。唯一的方法是为单个 URL 编写 301 重定向，这对于 10000 个 URL 是不可行的。现在我们可以使用带有 NOINDEX 的机器人元标记吗？ 我的问题基本上是，如果我写一个 NOINDEX 元标记，Google 会删除已经编入索引的 URL 吗？如果不是，还有哪些其他方法可以从 google 中删除旧的已编入索引的 URL？我可以做的另一件事是让所有之前的页面都出现 404 错误以避免重复，但这样做正确吗？

Answer 1

Now we are not able to write a regular expression for the change of URL's using a 301 redirect, because the change was such. The only way to do it would be to write 301 redirects for individual URL's which is not feasible for 10000 URL's.

当然可以!我正在使用 mod_rewrite 和 RewriteMap 重写超过 15000 个 URL!这只是编写脚本/回显所有 URL 和掌握 vim 的问题，但你可以，而且很容易。如果您需要更多信息，请直接询问。

你可以做的是像这样的 RewriteMap 文件:

/baskinrobbins/branch/branch1/ /baskinrobbins/branch/Florida/Jacksonville/branch1

我做了一个巨大的答案 here并且您可以非常轻松地使其适应您的需求。

我最多可以在 1-2 小时内完成这项工作，但我很贵 ;)。