大家都知道做SEO要分析网站日志，要查看蜘蛛抓取网站页面的情况。我不知道大家有没有发现一个规律?蜘蛛会不定期的抓取网站所有页面的链接，不管是没有被收录的页面和还是已经被收录的页面，蜘蛛都会来抓取，不过有的页面蜘蛛经常来抓，有的页面蜘蛛来的频率却很低，这又是为什么呢?

接下来先向大家介绍几个SEO的重要概念，再来回答上面蜘蛛抓取频率的问题

1、关于索引的概念：

索引意思是被进行收录的页面，并参与排名的页面。目前在搜索结果中，只展示760个搜索结果，你搜索任何关键词，你的这个页面在这760个页面当中，这属于收录;

2、关于缓存机制的概念:

你会发现，当你在搜索某个关键词的时候，在短时间内，搜索结果是不变的，这个是因为缓存机制的原因。但是过一段时间之后，再去搜索这个关键词，搜索结果会发生一些变化，这个是因为在整个搜索引擎机制中还会涉及缓存淘汰和缓存跟新机制。

3、什么是的库?普通库?底层库?这里给大家进行详细的说明

网站的页面在眼里有四种评分等，分别为D、C、B、A等：

D等：蜘蛛爬过该页面，但是不收录这个页面。有2个原因，页面内容质量差，权重低;

C等：也叫底层库，收录了该页面，但是基本上不会带来任何流量。怎么判断页面是否进入了底层库呢?

出现以下任何一种情况，都属于底层库：

(1)、在搜索该页面的全标题，搜索结果中不会出现该页面，因为这个页面根本没有参与排名;

(2)、在搜索该页面的URL，快照进去，发现快照没有新快照日期，直接进入了该页面，这说明蜘蛛已经很少来抓取这个页面了。

B等：也叫普通库，该页能为网站带来少量流量，页面参与关键词排名。怎么判断页面进入了普通库呢?

普通库的判断方法：

(1)、在搜索该页面的全标题，在搜索结果的首页会出现该页面，但是搜索该页面的部分标题，该页面首页了;

(2)、在搜索该页面的URL，快照进去，快照有新日期，这说明蜘蛛隔一段时间会来抓取这个页面;

(3)、普通库一般不容易在搜索结果中展示图片。

A等：也叫库，这种页面会为网站带来80流量。如何判断呢?

我们先看一张库页面和普通库页面，在site指令下的不同的表现:

(1)、在搜索该页面的全标题，在搜索结果的首页会出现该页面，搜索该页面的部分标题也会在首页出现，如下图：(搜索该页面的部分标题，排在搜索结果首页的第2位)

(2)、在搜索该页面的URL，快照进去，快照有新日期，蜘蛛会经常来抓取这个页面，抓取频率比较高;(7月27日抓取的，现在7-29日，只隔了2天时间)

(3)、库页面很容易在搜索结果中展示图片，如果该页面有图片的话，如上图。

明白了这些概念好办了，我们现在要做的是建设网站的库页面，为网站带来流量和转化，这里我给出一个我认为比较合理的建设库页面的标准：

(1)根据用户需求，数据分析，建立关键词库;

(2)文章页面字数要求500字以上;

(3)多图，图片清晰，图片文件大小控制在200KB左右，ALT属性和标题主题及上下文相关，图片长宽比为5:3;

(4)根据关键词库来进行创作，原创或者整合编写，每一篇库页面一定是花费了编辑的心血编写而成的，这个可以制定相应的KPI制度奖惩内容的创建者;

(5)文章发布会，时间使用主动推送工具推送给，原创保护。

SEO算法系列的后总结：我们应该尽量清理网站的底层库页面和长期不收录的没有任何价值和意义的页面，重新创建多的页面，提升页面占网站总页面的比例，这样给予网站的评分才会越来越高。外链建设虽然重要，但是应该放在次要位置，建设内容才是根本。一切能被搜索到的东西都可以被优化，做好2点行了。一是创建的内容，编辑越熟悉了解公司的产品服务越好，与客户接触的越多越好，越了解用户的需求越好;二是把内容发布到权重高的平台，如卢松松的软文平台的权重比较高。真正的做好这2点，排名引流So easy。