抓取期

　　一般來說，蜘蛛不會一上線就爬。一般來說，有一個(gè)時(shí)間段，一周左右。

　　當(dāng)然，也有可能是某個(gè)網(wǎng)站上線后就沒有被抓取過。其中一個(gè)可能的重要原因是網(wǎng)站的域名之前被使用過，被K屏蔽了，也就是被百度列入黑名單，在檢查期間被延遲。

　　如何確定一個(gè)域名以前是否被使用過？我們可以用百度和好樂搜索域名，看看有沒有舊信息。之所以用good le來搜索，是因?yàn)間ood le的信息是* * * *，其收款金額是* * * *，比較全面。如果發(fā)現(xiàn)以前用過域名，果斷換域名。

　　另外，在爬行周期中，也有一個(gè)失敗周期。有可能域名是新的，網(wǎng)上提交的，蜘蛛也爬。但是爬行過程中存在問題。可能出現(xiàn)兩種情況，一種是服務(wù)器空間提供者屏蔽蜘蛛，另一種是DNS有問題，就是域名解析服務(wù)器。當(dāng)我們訪問網(wǎng)站時(shí)，我們首先解析IP地址，然后通過IP地址找到服務(wù)器。問題是在解析網(wǎng)站時(shí)，如果IP無法解析，可能會被服務(wù)器空間商阻塞，尤其是一些小空間商或者不穩(wěn)定的外來空間商，可能會導(dǎo)致這種情況。所以盡量選擇穩(wěn)定的家居空間。

　　如何判斷空間提供商是否有屏蔽問題，兩個(gè)小技巧，一個(gè)是網(wǎng)站上線后驗(yàn)證百度站長平臺，如果被屏蔽，會有消息提醒；另一種是抓取診斷，用于提交路徑，測試抓取是否正確穩(wěn)定。

　　包含期

　　蜘蛛爬行后，有一個(gè)周期，可能不會立即包括在內(nèi)。而且收錄的時(shí)候，第一頁也會收錄。有個(gè)沙盒概念，說是新網(wǎng)站，會有檢查期。沙盒期會導(dǎo)致一些頁面不能立即發(fā)布，同時(shí)也可能導(dǎo)致包含期較長。

　　如何縮短沙盒周期要注意一些技巧

　　第一，在沙盒時(shí)期，知道蜘蛛是否會抓取內(nèi)頁是非常重要的。可能是看網(wǎng)站日志分析出來的。如果搜索引擎抓取了內(nèi)頁，但是沒有發(fā)布，那么我們的解決方案是發(fā)送外頁鏈接，我們的意思是發(fā)送內(nèi)頁的鏈接。

　　投票期

　　投票期是指提高網(wǎng)站綜合得分。投票期也是有周期的。發(fā)現(xiàn)期為一周。權(quán)重越高，發(fā)現(xiàn)期越短，統(tǒng)計(jì)期一周，時(shí)間無法縮短，行動期不確定，死亡期發(fā)生。當(dāng)鏈接失效時(shí)，將進(jìn)入死亡期。

　　計(jì)算周期

　　與一個(gè)概念相關(guān)，搜索引擎優(yōu)化的倒排索引，搜索引擎會對關(guān)鍵詞進(jìn)行預(yù)處理，先排列好，用戶搜索的時(shí)候直接展示給客戶，這也是為什么百度搜索關(guān)鍵詞只需要不到一秒鐘就出來，節(jié)省了很多時(shí)間，而不是你搜索的時(shí)候，百度只去數(shù)據(jù)庫搜索結(jié)果。這就是所謂的倒指數(shù)，倒序來，不是赤手空拳。