各大搜索引擎蜘蛛程序


查看了一下网站日志,发现各大搜索引擎在服务器上的登陆日志。

1.Google蜘蛛程序,说明
http://www.google.com/bot.html

2.百度蜘蛛程序,说明
http://www.baidu.com/search/spider.html

3.搜狗蜘蛛程序,说明
www.sogou.com/docs/help/webmasters.htm#07


本文链接地址: 各大搜索引擎蜘蛛程序