抓取的深度和廣度

從圖中可以看出，百度蜘蛛的訪問次數(shù)和抓取量分別是98600和224896，谷歌蜘蛛的訪問次數(shù)和抓取量分別是31157和172790，讓我們用小學(xué)數(shù)學(xué)老師教的算術(shù)來算一下平均每個(gè)蜘蛛訪問的頁面數(shù)，百度蜘蛛：224896/98600=2.28，谷歌蜘蛛：172790/31157=5.54，可以看出百度的抓取廣度要比谷歌優(yōu)越一些，而谷歌蜘蛛的抓取深度明顯要高于百度，百度每個(gè)蜘蛛平均才看兩個(gè)頁面，因此，很多數(shù)據(jù)量稍大點(diǎn)的網(wǎng)站經(jīng)常會(huì)出現(xiàn)這個(gè)情況，谷歌收錄比較多，而百度收錄非常少，針對(duì)這一點(diǎn)，做百度收錄量的時(shí)候，如果數(shù)據(jù)量較大，內(nèi)頁的隨機(jī)文章調(diào)用這一塊一定要做好，至于如何隨機(jī)，自己發(fā)揮吧。

服務(wù)器租用/服務(wù)器托管中國五強(qiáng)！虛擬主機(jī)域名注冊(cè)頂級(jí)提供商！15年品質(zhì)保障！--億恩科技[ENKJ.COM]