一、爬行和抓取
首先我们要知道到搜索引擎蜘蛛要想爬行和抓取一个页面,你就必须要知足两个特点:第一、足够的外链;第二、网站更新频率。在百度站长平台里面每个站点都会有一个抓取频次,而抓取频次我们可以特定的看作站点受蜘蛛的喜好程度,也可以普通的理解站点抓取频次越高,那么你站点被蜘蛛喜好程度就会越高,从而你的收录就会加快。如果利用蜘蛛池这类程序的同学,我想就该当非常清楚,但是很多朋友纵然利用了蜘蛛池那也只是外部链接进行吸引蜘蛛,如果配上站点更新频率,效果更佳!

二、收录和索引

常日大家会认为页面收录与页面建立索引无太大差异,实在不是,在全体站点页面文档中会有两种情形:
1、URL收录---是,索引---否;代表已经进入了索引,只是这个网页的“权重”非常非常低,可以视作是“无效索引”。
2、URL收录---是,索引---是;代表已经有资格参与排名,但是不担保100%能获取排名,可以视作是“有效索引”。
我们可以大略的去理解site出来的站点页面是被收录的,但不代表site出来的页面是被索引的.
三、检索和排名
在全体检索与排名中,会表示出最常用的两个搜索引擎事理,一个便是倒排索引,其余一个便是TF-IDF算法。TF-IDF算法是用来检索页面文档关键词涌现的频次。并且可以通过该算法打算一个文件凑集里面的词频涌现的次数从而来评定一个页面的主要程度。而该主要程度是结合页面TITLE来打算,也便是大家常说的文章内容要符合页面标题的主题干系性,类似作文写作中的紧扣主题。
从页面抓取到检索排名我一共有几个步骤:
1、定时更新,让蜘蛛抓取频繁抓取,建议给百度提交站点舆图,定时更新站点舆图。
2、通过文章以及修正标题与布局重构让页面变得更新有新鲜度,知足更符合页面的用户需求。
3、每天保持大量的更新让蜘蛛抓取形成习气。
4、老域名以及加上站点原始数据积累,可保持站点的威信度,从而相对新域名来说站点更加具备抓取上风。
