对于做网站优化的人来说,搜索引擎抓取的频率越高,正常的情况下这个网站就越受搜索引擎的亲耐和喜欢,甚至我们可以说这个网站权重高,当然也会有一些采集站会因为其无限的内容造成蜘蛛黑洞(蜘蛛陷阱)而非正常的抓取频率。
对于国内的几大搜索引擎都有类似的功能,百度搜索的抓取频次,360 搜索的蜘蛛压力,搜狗搜索的抓取压力,包括专注移动搜索的神马也有抓取频次功能,通过站长平台都可以进行直接的调整或者间接的反馈,当然除了国内的搜索引擎,Google 也是有该功能的,这里子凡就不展开来分析了。
一般情况下而言搜索引擎会根据网站内容的更新速度来自动更改抓取频率,新网站上线初期可能会存在一段时间的大量抓取,因为搜索引擎其实和人的好奇思维一样,发现新的东西就会先去整站跑一遍,如果你能够坚持持续的输出新鲜内容,那么你可以很好的保持搜索引擎快速的抓取频率。
然而对于一个不是怎么更新的站点,搜索引擎一般每天也是会抓取,至少也都会有一次首页的抓取,一方面可以看看这个网站的首页有没有更新或者变化,另一个方面则是判断这个网站是否还能正常抓取,用于知道这个网站的存活状态,这一点谷歌比国内的所有搜索引擎的反映都快,如果你关闭一个网站,谷歌可能会在很短的时间内下线网站搜索引擎,避免用户点击后发现网站无法打开的情况,从而提升用户体验,相反国内的搜索引擎就显得力不从心,关闭一个网站后往往几个月都还能够正常的出现在搜索结果排名中。
由于子凡没有办法给到大家一个具体的数字,所以就以泪雪博客为例,给大家分享一些搜索引擎的抓取频次的情况:
1. 百度的抓取频次在 300-4300 次每天,波动较大,因为泪雪博客的发文频率并不规律,发文时间也全部随机,没有刻意的定时发布,整体的抓取及时度还算不错,其中值得一说的是因为泪雪博客采用了主动推送,相较于百度自动抓取会更快。
2. 360 搜索的抓取频率相对较低,保持在 27 次每天,抓取的及时度还算行,平均下来一个小时还能抓取一次,只是可能会存在抓取收录不全面的情况。
3. 搜狗搜索的抓取频次波动也比较大,72-2900 次每天的波动,1500 左右偏多,抓取的及时度相对较差,一篇文章可能要等一两天才会被收录,处理速度还是太慢了点。
4. 神马搜索的抓取频次表现还不错,每天是在 506 次,但是这收录就比较感人了,别看抓取频率这么高,万一只是来看看我网站挂了没有呢?哈哈哈
好啦,就这样吧,内容可能不是什么干货,不过大家也可以去站长平台观察一下自己的网站的情况,如果出现更新不及时,或者收录页面较少的情况,可以手动的干预调整一下,虽说不是百分百生效,但也能在一定程度上增强搜索引擎的抓取,至于最后是否会被收录,这就又得回到内容质量本身了,当然也与各个搜索引擎的识别有关了。