什么是爬虫可以沿着内部链接跟随的抓取路径？

定义

抓取路径是爬虫能够跟随的内部路线。它是内部链接和可到达 URL 组成的链条，使爬虫能从一页走到另一页。

短答

抓取路径是爬虫能够逐页跟随的内部路线。如果没有内部路线到达某个 URL，该页就不在网站其余部分的抓取路径上。

要检查什么

• 存在一条内部路线
• 爬虫可以跟随这条路线
• 链接把页面连起来
• 到不了的页面在路径外

它不声称什么

有抓取路径并不保证爬虫会索引路线上的每个 URL。Mika 不保证搜索排名或 AI 答案引用，即使存在内部路线也一样。

一个结构示例

当每一步都是内部链接时，爬虫可以从一页走到产品页，再走到规格页。这条链就是抓取路径；没有任何内部链接的页面是这些路线之外的孤立页。