我创建了页面来获取目录中的反向链接 (p)。
我已经根据下面的代码在robots.txt和sitemap.xml中提到了它,但3个月后它们仍然没有被Google索引:
机器人.txt:
User-agent: *
Disallow: /dir1
Disallow: /dir2
Disallow: /dir3
Disallow: /dir4
Sitemap: https://example.com/sitemap.xml
<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">
<url>
<loc>https://example.com/</loc>
<lastmod>2024-12-01</lastmod>
<priority>1.0</priority>
</url>
<url>
<loc>https://example.com/p/</loc>
<lastmod>2024-12-01</lastmod>
<priority>0.8</priority>
</url>
</urlset>
<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">
<url>
<loc>https://example.com/</loc>
<lastmod>2024-12-01</lastmod>
<priority>1.0</priority>
</url>
<url>
<loc>https://example.com/p/page1.html</loc>
<lastmod>2024-12-01</lastmod>
<priority>0.8</priority>
</url>
<url>
<loc>https://example.com/p/page2.html</loc>
<lastmod>2024-12-01</lastmod>
<priority>0.8</priority>
</url>
.
.
.
</urlset>
XML 站点地图应包含所有有价值的、可索引的 URL,而不仅仅是顶级子目录 URL:https://developers.google.com/search/docs/crawling-indexing/sitemaps/build-sitemap
但是,搜索引擎不必对您的内容建立索引;如果他们认为它质量低,那么他们很可能不会将其编入索引。