互联网记

最新对百度蜘蛛的发现，百度对新站蜘蛛爬的很快

作者: 唐布拉草原  日期: 2008-03-10 12:02

字体大小: 小 中 大
       最近弄了几个自动采集更新的程序就是 NICEWORDS，建了几个站反正成本也就一块钱一个。K了也不心疼，因为也不会花很多功夫进去，都是自动更新的。为了观察蜘蛛的情况所以都开了网站日志，昨天建了个站，发现百度的蜘蛛已经几乎将所有的页面爬完了，但是又看了一个被K的站他就爬了没几页。发现他蜘蛛对新站的页面爬的很快，估计可能是否验证是垃圾数据还是什么东西，至于收不收还要看下次的更新情况。。

估计可能是不近人意的。
标签: 百度
评论: 0 | 引用: 0 | 阅读: 190
显示Tag关联文章
百度HI 邀请，获得邀请 (2008-03-26 21:52)
百度昨天又进行了更新 (2007-12-12 13:11)
百度用什么程序写的？ (2007-11-26 11:16)
百度昨天将大多数被封的站放出来了 (2007-11-22 11:37)
百度统计测试版正式上线了 (2007-11-03 12:46)
百度的又一次更新 (2007-11-01 11:09)
百度更新 (2007-10-26 10:01)
百度进军C2C电子商务 与阿里巴巴正面交锋 (2007-10-19 11:30)
10月份百度的一次更新 (2007-10-18 09:28)
百度秘密研发即时通讯软件 (2007-10-07 18:56)
发表评论
昵　称: 密　码:
网　址: 邮　箱:
验证码: 验证码图片 选　项:
内　容: