“蜘蛛”对做SEO或者是搜索引擎整合营销类的公司在熟悉不过的东西，如果网站内容不好，用户体验差，它都能感觉到，它是被谁控制的呢，控制它的就是百度的搜索引擎工程师。

百度搜索引擎内部的工程师，大多都是博士硕士，品牌学校的毕业生应该也是非常多。能完成名校理工科博士硕士学业的人，。我想他们也比大部分人聪明。搜索引擎内部的很多人，他们本身就是站长，知道做网站的人都会有些什么作弊方法，他们也都是了如指掌。
    当蜘蛛进入一个网站的时候，在一个页面上发现有很多的连接的时候，不是顺着各个连接进行一步步的纵向抓取，而是一层层的抓取，比如把层的连接全部抓取完成，再沿着第二层连接进行抓取。

一般来说，在搜索引擎蜘蛛进入网站时候，首先是对内部连接纵向抓取，其次是对外部横向抓取，也就是说搜索引擎蜘蛛抓取页面是纵向原则和横向原则想结合的。但无论是纵向抓取还是横向抓取，只要网站是和蜘蛛的爬行和胃口，蜘蛛就能将您的网站所有网页爬完。

为了培养蜘蛛的访问，站长在发布文章时有固定的时间间隔和一定的规律，这样对蜘蛛的由好处的。比如站点是每天的上午9点钟到下午的6点发布文章更多。那么搜索引擎蜘蛛针对这个站点就会在自己的规则里填写上这样一条时间段的规则，以后就按照这样的规则执行，即节省了时间又提高了效率。

SEO搜索引擎优化其原理是遵循搜索引擎的搜索原理，网站推广策划尤其重要，要对网站结构，网页文字等进行合理规划部署，以改善网站在搜索引擎的表现，使网站在搜索引擎更加友好，从而提高网站关键词在搜索引擎相关搜索结果的排名，经行为企业带来源源不断的客户。