* Robots用于定义网页搜索引擎索引方式
* Robots出现在Name属性中，使用Content属性定义网页搜索引擎索引方式
* 通过使用Meta的Robots属性值可以为没有文件上传权限的用户提供/Robots.Txt文件的所有功能
* 如果网页没有提供Robots，搜索引擎认为网页的Robots属性为All(Index，Follow)；
<meta name=”robots” content=”noindex” />
定义了此网页不被搜索引擎索引进数据库，但搜索引擎可以通过此网页的链接继续索引其它网页
<meta name=”robots” content=”nofollow” />
定义了此网页被搜索引擎索引进数据库，但搜索引擎不可以通过此网页的链接继续索引其它网页
<meta name=”robots” content=”none” />
定义了此网页不被搜索引擎索引进数据库，且搜索引擎不可以通过此网页的链接继续索引其它网页
<meta name=”googlebot” content=”noindex, nofollow” />
针对谷歌GOOGLEBOT使用Robots
<meta name=”baiduspider” content=”noarchive” />
针对百度Baiduspider使用Robots
转载请注明：有客帮 » Robots 属性值 — 定义网页搜索引擎索引方式