什么是Robot？

什么是Robot？

机器人英文直译就是机器人。在搜索引擎优化SEO中，我们经常翻译成：检测器，有时也叫。

爬虫(Crawler)和蜘蛛(spider)都是检测器，只是叫法不同。

SEO中的探测器(Robot)是什么？

搜索引擎用来抓取网页的工具。它是一个软件或者一系列自动程序(显然不是机器)。

不同的搜索引擎给自己的机器人起了不同的名字。

谷歌：googlebot

百度：百度飞侠

MSN:MSNbot

Yahoo:Slurp(雅虎家的yahoo one比较特别，它没有“姓”，用的是拟声词。Slurp，中文理解是机器人吃饭时发出的啧啧声)

关于Robot，主要要关注的是Robots.txt，以及网站日志中包含的上述名字。