注册
 找回密码
 注册
江西广告网
查看: 138|回复: 0
打印 上一主题 下一主题

常见搜索引擎蜘蛛大全

[复制链接]

该用户从未签到

1
跳转到指定楼层
发表于 2008-12-2 09:23:50 | 只看该作者 回帖奖励 |倒序浏览 |阅读模式

马上注册,结交更多好友,享用更多功能,让你轻松玩转社区。

您需要 登录 才可以下载或查看,没有帐号?注册

x
  百度 baidu.com----Baiduspider   http://www.baidu.com/search/spider.htm   谷歌 google.com----Googlebot   http://www.google.com/bot.html 中文版请打开以下页面   http://www.google.cn/support/webmasters/bin/topic.py?topic=8843   雅虎 yahoo.com----Yahoo   http://misc.yahoo.com.cn/help.html 打开后跳转到以下页面   http://help.cn.yahoo.com/property.html?product=websearch   有道 yodao.com----YodaoBot   http://www.yodao.com/help/webmaster/spider/   搜搜 soso.com----Sosospider/Sosoimagespider(网页蜘蛛/图片蜘蛛)   http://help.soso.com/webspider.htm   http://help.soso.com/soso-image-spider.htm   搜狗 sogou.com----sogou   http://www.sogou.com/docs/help/webmasters.htm#07   微软 msn.com----msnbot   http://search.msn.com/msnbot.htm 打开后跳转到以下页面   http://help.live.com/help.aspx?mkt=zh-cn&project=wl_webmasters   以下是几只收获(抓取页面)不劳动(不来流量)的蜘蛛 可以考虑禁了它们爬行 省空间流量   国外搜索引擎   gigablast.com----Gigabot   http://www.gigablast.com/spider.html   国外搜索引擎   webalta.net----WebAlta   http://www.webalta.net/ru/about_webmaster.html   国内的一个实验室的   apex.sjtu.edu.cn
您需要登录后才可以回帖 登录 | 注册

本版积分规则

快速回复 返回顶部 返回列表