鸿 网 互 联 www.68idc.cn

当前位置 : 服务器租用 > seo > >

什么是搜索引擎蜘蛛?

来源:互联网 作者:佚名 时间:2015-01-05 13:21
【seo学堂编辑推荐】搜搜引擎蜘蛛是一个自动抓取互联网上网页内容的程序,每个搜索引擎都有自己的蜘蛛。 搜索引擎蜘蛛也叫搜索引擎爬虫、搜索引擎robot。 国内

  【seo编辑推荐】搜搜引擎蜘蛛是一个自动抓取互联网上网页内容的程序,每个搜索引擎都有自己的蜘蛛。

什么是搜索引擎蜘蛛?


  搜索引擎蜘蛛也叫搜索引擎爬虫、搜索引擎robot。

  国内各大搜索引擎蜘蛛名称:

  百度:百度spider

  谷歌:googlebot

  搜狗:sogou spider

  搜搜:Sosospider

  360搜索:360Spider

  有道:YodaoBot

  雅虎:Yahoo Slurp

  必应:msnbot

  Msn:msnbot

  以上是常见的搜索引擎蜘蛛(爬虫),,如果你的网站不想让让某些蜘蛛抓取,那么可以通过robots.txt来限制爬虫的抓取。

   更多有关seo教程的相关文章,请点击:

网友评论
<