抓取的深度和广度 |
发布时间: 2012/9/23 15:50:55 |
从图中可以看出,百度蜘蛛的访问次数和抓取量分别是98600和224896,谷歌蜘蛛的访问次数和抓取量分别是31157和172790,让我们用小学数学老师教的算术来算一下平均每个蜘蛛访问的页面数,百度蜘蛛:224896/98600=2.28,谷歌蜘蛛:172790/31157=5.54,可以看出百度的抓取广度要比谷歌优越一些,而谷歌蜘蛛的抓取深度明显要高于百度,百度每个蜘蛛平均才看两个页面,因此,很多数据量稍大点的网站经常会出现这个情况,谷歌收录比较多,而百度收录非常少,针对这一点,做百度收录量的时候,如果数据量较大,内页的随机文章调用这一块一定要做好,至于如何随机,自己发挥吧。 本文出自:亿恩科技【www.enkj.com】 |