我最近继承了一个代码库并发现了这个宝石： {% if PAGE_EXTRAS.hide_from_sitemap %} 我最近继承了一个代码库并发现了这个宝石： {% if PAGE_EXTRAS.hide_from_sitemap %} <META NAME="ROBOTS" CONTENT="NOINDEX, FOLLOW"> <META NAME="ROBOTS" CONTENT="INDEX, NOFOLLOW"> <META NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW"> {% endif %} 我不知道它想做什么。您是否有理由在这样的网站中放置多个明显冲突的机器人标签？或者它真的像我无知的眼睛看起来那么疯狂吗？ 这对我来说似乎是一个错误。我能找到的唯一信息是在 Google 的机器人元标记规范: 如果我们的爬虫遇到竞争指令，我们将使用我们找到的最严格的指令。 所以（至少对于谷歌来说）代码： <meta name="robots" content="noindex, follow"> <meta name="robots" content="index, nofollow"> <meta name="robots" content="noindex, nofollow"> 的作用与： 完全相同 <meta name="robots" content="noindex, nofollow"> 可以想象，这段代码可能是某种偷偷摸摸的黑客行为，旨在通过利用不同的爬虫解决冲突的方式的差异，将不同的规则应用于不同的爬虫。如果是这样，恕我直言，这是一个糟糕的主意。当已经有合法的机制可以做同样的事情时，就不需要进行混乱而脆弱的黑客攻击： <meta name="googlebot" content="noindex, follow"> <meta name="bingbot" content="index, nofollow"> 根据这篇文章，最严格的将获胜： https://developers.google.com/search/blog/2007/03/using-robots-meta-tag
如何在分页列表中的typo3 tx_news中插入元标签机器人
是否可以在列表的分页页面中插入元标记 robots->noindex - 不是在第一个页面而是在所有其他页面中？ 打字错误3 8.7 - tx_news 6.3.0 铜 沃尔克