Robot（搜索引擎探测器）是什么？
Robot：机器人，可以指代方方面面的高科技非人力但可以运动的人形工具。
但在SEM中，Robot专指搜索引擎探测器，指代抓取你网页内容，编入索引的程序。
Robot（搜索引擎探测器）有哪些？
只说比较常见国内较大的：
百度：baiduspider
谷歌：googlebot
Bing：MSNbot（暂命名，可能以后会改名）
Yahoo：Slurp（暂存，可能以后会消失）
Alexa：ia_archiver
Robot（搜索引擎探测器）有什么用？
我做我的网站，Robot（搜索引擎探测器）是什么，关我什么事？
如果你这么说的话，大家会发现你是新手。
Robot只是搜索引擎的探测器，与你的网站的建设确实没有关系，但是却又决定了你网站的生死，为什么我要这么说？
把一个网站展示给客户或者目标用户，有两种途径：
1.直接输入你的网址，访问你的网站。该方式当然好，你也希望，但是有个问题，你如何让别人知道你的网址？你可以去街上发广告，电线杆上贴纸条，电视上录节目等，一需要花成本，二可能面很窄。这时你就需要使用第二种方式了。
2.靠搜索引擎，让有需要的用户找到你，这就是一种网上营销的思路，也是SEM关注的目标。让更多的用户找到你，创造更多的价值。我们需要依靠搜索引擎，而搜索引擎通过什么了解你，那就是大名鼎鼎的Robot了。Robot访不访问你的网站，收录如何都会直接影响到你网站的效益。
Robot（搜索引擎探测器）关注点：
1.关注和控制Robot是为了网站更好的收录，通常我们在建站初期关注更多一些，而当网站收录稳定以后可以少看一些。先期需要发些链接吸引搜索引擎探测器。
2.控制Robot通过网站根目录建立Robots.txt来控制。
3.关于Robot（搜索引擎探测器），有好的搜索引擎探测器，也有不遵守Robots.txt坏的搜索引擎探测器，如果碰见不明不认识的搜索引擎探测器，可以在Robots.txt里屏蔽掉。
作者：杨灿灿@SEM界 SEM第一版 2009-09-01
SEM-ALL，中国SEM学习运营第一品牌
本文SEM-ALL版权所有，未经批准转载必究。