以前在文章里经常有说到搜索引擎蜘蛛(简称蜘蛛)，对于刚想做杭州SEO的，可能一时还无法理解是什么意思，其实也不过是个名称而已，稍微想下就很快可以理解了，这里就用专业的术语来讲解下，顺便对基础知识的一个补充吧！也介绍下各个搜索引擎的形式。 那什么是spider-蜘蛛？ spider-蜘蛛是搜索引擎用来访问Internet上网页的自动程序，也有人叫它机器人。 spider-蜘蛛的特点 spider-蜘蛛根据html 的语法和格式，对读取的页面进行代码过滤，收入相关的文字内容。目前搜索引擎无法象人那样去读相应的图片、Flash、影片里面的内容。图片中的文字对spider-蜘蛛来说是毫无意义的。对于javascript 里面的内容，现在已经有部分网站开始收录。 几大主流搜索引擎蜘蛛的名称 baiduspider - 百度机器人。 Googlebot - 谷歌机器人 YahooSlurp - 雅虎机器人 msnbot - Msn机器人 YoudaoBot - 有道机器人 Sogou spider - 搜狗机器人 当我们认识了各大搜索引擎蜘蛛的名称后对于分析网站日志起到很好的作用了，就可以知道哪个搜索引擎的蜘蛛来过多少次，来的频率怎么样，抓取网站的哪些页面等等，有利于我们分析网站目前的状况,方便我们及时调整网站的各种情况。