常见的网络爬虫-无忧广告交易网

常见的网络爬虫

作者：顺风车网时间：2006-11-28 10:24:33

googlebot/2.1，google spider，大名鼎鼎，不多说
baiduspider+，baidu spider，也是鼎鼎大名，不多说
yahoo! slurp，yahoo spider
sogou spider，sohu sogou spider，搜狗蜘蛛程序
iaskspider/1.0，sina的爱问
ia_archiver，这个程序可能有些人没见过，alexa放出来的蜘蛛
msnbot，msn的蜘蛛程序

作者：顺风车网时间：2006-11-28 20:31:19

lanshanbot/1.0，有人分析是中搜的蜘蛛

注　意：非本站会员没有发布信息的权利会员注册
用户名：　密　码：

内　容：

图　片：