很多时候在进行seo优化布局的过程中，很多的页面是不参与排名的，甚至很多的网站页面被收录反而会影响seo优化的效果。今天小凯seo博客就来和朋友们分享一下怎么样在seo优化的角度看禁止抓取和收录机制，下面要把禁止抓取和收录机制分成两个部分进行描述。
关于禁止抓取
控制搜索引擎蜘蛛对网站进行抓取的方法一般都是通过robots协议来实现的，而robots协议的作用也体现出可以告诉蜘蛛不要抓取某些页面，也就是说并不是通过robots协议来实现蜘蛛对网站页面的抓取，其实主要还是通过这份协议来不让蜘蛛抓取网站的某些页面。
通过禁止抓取可以给seo优化带来怎么样的作用呢？首先当然是考虑到集中权重的作用，还有就是可以让搜索引擎蜘蛛在抓取网站的时候，有一种非常干净整洁且内容主题明确的印象。也就是说可以把网站主题不相关的辅助类目链接给屏蔽掉，比如网站的后台登录页面和后台编辑程序，这一些内容是对用户没有任何作用的，既然要着重突出网站的主题，这些内容当然是要完全屏蔽掉才符合seo优化的原则。
关于收录机制
对于网站关键词的排名基础来说，收录是必须的。而且如果像获得海量关键词排名的话，网站的收录量还需要达到一定的数量。朋友们都应该清楚的认识到，网站的页面之所以可以获得关键词排名，正是因为网站页面的标题匹配到了用户搜索的关键词，并且网站页面的内容质量也可以很好的满足用户需求。在一个高质量的网站页面当中，有良好的seo站内优化进行布局之后，才会获得关键词排名，但是前提条件就是搜索引擎必须收录这个页面。
所以说，如果想要网站获得更多的关键词排名，让网站可以健康的茁壮成长，最终成为一个优秀的高流量网站的话，收录量的提升是至关重要的，而且要着重把握好所收录的网站页面的内容质量，只有符合seo优化的网站页面收录后才有价值。