搜索引擎会定期更新算法，网站排名也会受到一定影响。所以对于站长们来说，进行网站 SEO 优化就要掌握搜索引擎的基本工作原理，了解搜索引擎蜘蛛是如何爬行工作的，这样才能有目的、有效地优化网站。
搜索引擎蜘蛛是什么?搜索引擎蜘蛛，是百度搜索引擎的一个自动程序。它的作用是访问收集整理互联网上的网页、图片、视频等内容，然后分门别类建立索引数据库，使用户能在百度搜索引擎中搜索到您网站的网页、图片、视频等内容。
一、蜘蛛的抓取规则：
搜索引擎里面的蜘蛛需要把抓取回来的网页放入数据库区，来进行数据补充，在通过程序的计算，进行分门别类的放在不同的检索地方，那么搜索引擎就形成了一个稳定的收录排名。而在进行这个的过程中，蜘蛛所抓取的数据也不一定是稳定的，有很多在程序计算过后，被其它好的网页给挤掉，说简单点，也就是蜘蛛不喜欢，不想抓取这个网页。
蜘蛛的口味很独特，它所抓取的网站都是很不一样的，也就是我们所说的原创文章，只要你网页里的文章原创度很高，那么你的网页就会很高的机率被蜘蛛所抓取，这也是为什么越来越多的人更加的要求文章原创度的原因。
只有这样检索后，数据的排名就要稳定些，而现在搜索引擎改变了策略，正在慢慢的、一步步的向补充数据进行转变，喜欢把缓存机制和补充数据这两点结合起来运用，这也是为什么进行搜索引擎优化时，收录上越来越困难的原因，我们还可以理解为，有很多的网页今天没有收录排名，隔一断时间就有收录排名的原因。 二、增加网站抓取的频率：
1、网站文章的质量度提高
虽然做 SEO 优化的人都懂得要做到提高原创文章，但是搜索引擎里面有一个不变的真理，就是永远也满足不了内容的质量和稀缺性这两点要求。在创造内容的时候，一定要去满足每一位潜在访问者的搜索需求，因为原创内容也不一定能总是得到蜘蛛的喜爱。
2、更新网站文章的频率
满足了内容，就要做好正常的更新频率才是重点，这也是一个能提高网页被抓取的法宝。
3、网站速度不仅对蜘蛛有影响，对用户体验也有所影响
蜘蛛进行访问的时候，想要没有障碍，加载的这个过程中能在合理的速度范围内，就要保证蜘蛛能在网页里面平滑的爬行，千万不要发生什么加载延迟的情况出现，要是经常遇到这种问题，那么蜘蛛就会不喜欢这个网站的，在频率上就会减少爬行。
4、提高网站品牌的知名度
常混在网络上你就会发现一个问题 ，很有知名品牌在推出新的站点时，就会去一些新闻媒体里面进行报道，经过新闻源站点的报道，就会加入一些品牌词内容，就算是没有一个目标之类的链接，这么大的影响，搜索引擎也会去抓取这个站点。
5、选择一个高 PR 的域名
PR 是一个老式的域名，那么它的权重肯定是很高的，就算你的站点很久都没有去更新或者是一个全封闭式的站点页点，搜索引擎也会去爬行，随时等待着更新内容。如果某人在一开始就选择用这样的旧的域名，也可以将重定向发展，成为一个真正的操作域名。
二、蜘蛛抓取频次
如果是一个很高权重的网站，在更新的频率这块就会是不一样的，所以频率一般会在几天或者一个月之间，网站质量越高那么更新的频率就会越快，蜘蛛就会不断的访问或者是去更新这个网页。
总而言之，用户们对 SEO 这个搜索的兴趣是很大的，有着很强大的潜在商业价值的服务手段，但是由于这个工作是长期性的，所以我们不能着急着走向成功这条路，一定要慢慢的来。在这个竞争强的互联网环境中，只要你能比对手多做那么一点点，就能得到质的飞跃。
