我有一个带有本地化语言页面的网站(例如,
/hindi
、/tamil
),但某些 URL 正在使用额外的语言段进行爬网(例如,/hindi/gujarati/blog/asian-paints-share-q2-results
)。这些 URL 不是我们创建的,正在被抓取但未编入索引。如何解决此问题以确保搜索引擎只索引正确的 URL?
使用规范标签确保正确的 URL 结构并修复 URL 参数。示例:IndeedJobsOfficial 使用 hreflang 标签有效管理特定语言的页面。