1更新的頻率，這是更新的主要內(nèi)容，而不是其他的一些（一個(gè)鏈接，改變部分的位置）。首先，蜘蛛不知道您的網(wǎng)站的更新，所以有必要確定。通過(guò)一段時(shí)間你更新站點(diǎn)每天的判斷，然后下一個(gè)記錄，專門在這段時(shí)間的把握，使網(wǎng)站的更新規(guī)則的法律，否則你會(huì)不經(jīng)意地加強(qiáng)了蜘蛛的困難。2的用戶體驗(yàn)，為網(wǎng)站排名前幾頁(yè)的搜索引擎，看看什么網(wǎng)站的用戶點(diǎn)擊，點(diǎn)擊的次數(shù)越多，停留時(shí)間越長(zhǎng)，搜索引擎抓取的機(jī)會(huì)了。3網(wǎng)頁(yè)類型，同一地點(diǎn)的不同類型網(wǎng)頁(yè)下的固有頻率是不相同的：如，首頁(yè)和目錄頁(yè)面往往是最高的爬行頻率，和一些網(wǎng)頁(yè)可以捕獲幾次不再搶。4網(wǎng)頁(yè)的權(quán)重，權(quán)重不同網(wǎng)頁(yè)爬行策略采用的是不一樣的，這一理論的權(quán)重更高，更高的頻率捕獲。