如何停止索引链接与包含子文件夹

Question

我在我的网站应该指数谷歌真正的链接，（例如）：

www.mywebsite.com/title,id,sometext,sometext

不料谷歌搜索索引我的网站的子文件夹whitch不应该例如发生：

www.mywebsite.com/include/title,id,sometext,sometext www.mywebsite.com/img/min/title,id ，sometext，sometext 等

我该如何停止索引这些操作。我必须改变htaccess或robots.txt？帮助我，谢谢

Answer 1

您需要更新您的robots.txt以防止漫游器浏览这些页面，并且您应该在这些页面上设置noindex以将其从排名中移除。如果可以从多个URL提供相同的页面，您可能还想探索规范链接。