asp.net - Googlebot 正在访问 .aspx 页面，它应该只访问 SEO 友好的 URL

Question

Googlebot 正在访问我网站中的 .aspx 页面，例如 http://mysite.com/thepage.apx?id=32

我已将 Intellgencia URL 模块用于 SEO 友好的 URL，我的网站也有提供友好 URL(或无扩展名 URL)的链接，例如:http://mysite.com/thepage/32 .

但是，googlebot 正在访问原始 URL (http://mysite.com/thepage.apx?id=32)。

在 robot.txt 文件中，我放置了以下代码:

disallow: *.aspx

我的问题是它是否会隐藏所有带有 .aspx 页面和友好 URL(指向相同的 .aspx 页面)的页面，或者只隐藏带有 的页面。 aspx 扩展。

总结:
googlebot 正在访问具有两个 url 的同一页面:

1. 使用原始路径，例如 somesite/thepage.aspx?id=xx
2. 使用友好的 URL somesite/somepage/xx 我希望 googlebot 仅访问友好的 URL。我使用的是 asp.net 2.0，友好的 url 使用 intellgencia dll 在 web.config 中映射。

使用 Intellgencia 模块在 web.config 中编写代码。

<rewriter>
    <rewrite url="/category/(.+)" to="/categoryPage.aspx?Id=$1"/></rewrite>
</rewriter>

Answer 1

我认为您的网址映射有误。您的 aspx 网址也应该被映射。