搜索引擎蜘蛛抓取页面的规则

无论是新站还是老站被百度仅仅收录了首页这个问题,很多SEO从业者都有碰到这样的问题,本文将从搜索引擎抓取策略的层面帮大家分析可能的原因。

1、搜索引擎深度优先抓取策略

图片[1] - 搜索引擎蜘蛛抓取页面的规则 - 鹿泽笔记

为了让大家更容易理解这2个策略,给大家举个例子,如果是深度优先抓取策略,搜索引擎爬虫的爬取路径为:此时搜索引擎抓取的顺序依次为:首页、栏目 1、网页 A、网页 G、网页 B、栏目 2、网页 C、网页 D

2、搜索引擎广度优先抓取策略

图片[2] - 搜索引擎蜘蛛抓取页面的规则 - 鹿泽笔记

如果是广度优先抓取策略,搜索引擎爬虫的爬取路径为:此时搜索引擎抓取的顺序依次为:首页、栏目 1、栏目 2、栏目 3、网页 A、网页 B、网页 C、网页 D

搜索引擎针对不同的网站,其实采取的抓取策略是不同的,针对新站或权重低的网站,一般采取的是广度优先抓取策略

所以针对一个新站,一般是先收录首页、然后收录栏目页、最后才是内容页。其实出现这种情况后,大家也不要担心,只要文章质量还可以,迟早是会收录的。

👋 感谢您的观看!

© 版权声明
THE END
喜欢就支持一下吧
点赞0 分享