蜘蛛程序工作内容：搜集新出现的网页，搜集那些在上次搜集后有改变的网页；发现自上次搜集后已经不存在的网页并删除。
什么样的网站利于蜘蛛抓取？
合理的链接结构、合理的导航结构、有可读信息（文字图片动画）、规范化的url（把url静态化并减少层级），
秘诀：新网站想快速被百度招录最快的方法就是找一个大网站给你加一个链接。
对于影响百度排名的因素大概200项左右，影响谷歌排名的因素大概300项目，具体是什么没有人能详细的说出来。下面大概介绍几个影响百度的排名因素：1.静态url地址比动态url地址更具有优势。2.首页出现index.html必须处理掉。首页要有一个干净的域名。3.页面内容包含的所有关键词都会被搜索引擎识别，但是不同位置的关键词影响不一样。最大的因素就是title里面一定要加关键词。4.网页生成时间越久。排名越稳定5.网页与其他网页的链接关系等等都是影响排名的因素。
影响排名三大因素：1.内容的相关性：关键词在网页中出现的位置，出现的频率，出现的方式（完整匹配出现/拆分出现/同义词）；2.链接：高质量外链；3.用户因素：用户所在地域（如果你的网站是带有地域特征的，一定要在关键词上加地域名）；用户体验（浏览时间/浏览网页数量）；用户浏览习惯；用户的搜索点击流量（找相点QQ群。相互点击；也可以用软件【软件排名大师】不建议新站使用）
SEO最终作用：获得排名只是seo效果的表现之一；有效搜索流量带来的转化才是最终目标，seo追求的是目标流量，能最终带来盈利的流量。
注意：谷歌沙盒效应：一个新网站，即使做了很多seo（丰富的内容，大量的高质量外链，网站结构用户体验友好等）但在刚上线的几个月，谷歌几乎找不到好的排名。谷歌的沙盒效应【sandbox】一般会持续六个月。这六个月内新站应该不断完善各方面seo，沙盒效果过后，一般会有不错的排名、
seo常用术语：1.robots.txt协议：当蜘蛛访问站点时候，他会先检查站点根目录下是否存在.robots.txt，如果存在，会按照文件内容来确定访问范围。如果不存在，所有搜索蜘蛛将能够访问网站上所有没有被口令保护的页面。；2：sitemap是一种站点地图协议，网站中假加入sitemap文件，将更有利于搜索蜘蛛的爬行索引，将提高搜索引擎索引网站内容的准确率和准确度。；3.Alexa排名，即世界排名。具有一定权威性，（Alexa排名在国内不太重视，国外比较重视，有刷alexa排名的软件，laexa排名助手。）4.反向链接即外部链接。5.死链，网站内打不开网页的地址，死链不利于seo。要经常检查删除。6.404页面。网站页面因为某原因打不开就会显示错误页面即404页面。设置好404页面有利于seo。6.锚文本：即链接文本。7.301重定向跳转。老域名换新域名需要用到。可以把老域名的权重收录数据 排名等逐渐传递给新域名、另一种情况是老网页被收录了，我重新修改了url，为了避免被重复收录。就做301重定向。此外，一个网站如果绑定了多个域名。容易出现重复收录，不利于seo，可以通过301重定向（多个域名跳转指向同一个域名可以把权重集中在一个域名上）；8.谷歌pr值。谷歌官方数据，用来评定网页好坏标准。pr值分0-10级。国内对pr值不太重视；