1、網站和頁面權重。質量高，資格老的網站被認為權重比較高，這種網站上的頁面被爬行的深度也會比較高，所以會更多內頁被收錄。
2、與首頁點擊距離。一般來說網站上權重最高的是首頁，大部分外部鏈接是指向首頁的，蜘蛛訪問最頻繁的也是首頁。離首頁點擊距離近，頁面權重越高，被蜘蛛爬行的機會也越大。
3、導入鏈接。無論是外部鏈接還是同一個網站的內部鏈接，要被蜘蛛抓取，就必須有導入鏈接進入頁面，否則蜘蛛根本沒有機會知道頁面的存在。高質量的導入鏈接也經常使頁面上導出鏈接被爬行深度增加。
4、頁面更新度。蜘蛛每次爬行都會把頁面數據儲存起來。如果第二次爬行發現頁面與第一次收錄的完全一樣，說明頁面沒有更新，蜘蛛也就沒有必要經常抓取。如果頁面內容經常更新，蜘蛛就會更加頻繁地訪問這種頁面，頁面上出現的新連接，也自然會被蜘蛛更塊地跟蹤，抓取頁面。
