分析網(wǎng)站蜘蛛抓取與流量下降的原因與解決方法

來源：超達科技 發(fā)布時間：2021-11-11瀏覽：1526次

在網(wǎng)站日常運營的過程中，我們偶爾會遇到如下問題：  

①網(wǎng)站流量持續(xù)下降  

②網(wǎng)站抓取頻率同時下降  

③網(wǎng)站索引量保持不變  

面對這種情況，從SEO統(tǒng)計數(shù)據(jù)中，我們經(jīng)常會發(fā)現(xiàn)關(guān)鍵詞排名成斷崖式下跌，從而造成被降權(quán)的現(xiàn)象，一時之間，讓SEO人員無所適從。  

那么，網(wǎng)站流量與抓取同時下降，我們該如何審查？  

1、服務(wù)器更換  

在進行服務(wù)器更換的時候，如果處理不當(dāng)，還是非常容易造成百度爬蟲抓取不穩(wěn)定的情況，比如：  

①網(wǎng)站穩(wěn)定性  

在更換服務(wù)器后，你的服務(wù)器線路與IP可能會發(fā)生改變，這個時候，你需要在百度后臺查看，百度蜘蛛訪問是否出頻頻出現(xiàn)“鏈接超時”的情況。  

如果在不同時間節(jié)點，大量出現(xiàn)這個問題，那么一定會影響抓取量。  

②網(wǎng)站URL改變  

由于更換服務(wù)器，對于一些偽靜態(tài)的網(wǎng)站而言，它經(jīng)常需要調(diào)整偽靜態(tài)規(guī)則，在這個過程中，如果你的規(guī)則處理不當(dāng)，造成動態(tài)URL與偽靜態(tài)URL并存。  

那么，很容易造成，大量重復(fù)URL出現(xiàn)，你可以簡單通過site域名查看。  

如果出現(xiàn)這個問題，一是修正相關(guān)規(guī)則，二是利用301重定向。  

③防護軟件誤傷  

有很多站長會在服務(wù)器開啟第三方安全防護軟件，這些軟件大部分有一個自動屏蔽IP的功能，如果在某個IP段大量出現(xiàn)攻擊行為，甚至?xí)詣悠帘蜪P段。  

但有的時候，它也很有可能出現(xiàn)“誤傷”比如：錯誤的屏蔽了百度蜘蛛IP段。  

④服務(wù)器安全  

毫無疑問，如果網(wǎng)站被黑，它經(jīng)常是導(dǎo)致流量與抓取直線下降的主要原因，你需要審查是否被惡意篡改代碼，是否有選擇性的彈窗(根據(jù)IP地區(qū)、區(qū)別用戶與蜘蛛等)  

2、網(wǎng)站優(yōu)化策略  

如果你近期的優(yōu)化策略相對比較激進或被動，都會產(chǎn)生上述問題，比如：  

①被刷點擊  

這是一個非常讓人無語的行為，但百度也經(jīng)常會錯誤的認為你是在嘗試作弊，而造成誤傷。  

②短期大量外鏈  

對于外鏈優(yōu)化而言，快速建立大量外鏈，有的時候其實并沒有太大問題，問題在于，如果你所建立的低質(zhì)量外鏈，比如：新聞?wù)救和怄?，剛好有一部分域名，是在百度黑名單中，那么你的站點可能會短期快速被牽連。  

而如果你選擇的是新站群域名，那么可能還好一點。  

③關(guān)鍵詞堆積  

近百度上線《百度搜索網(wǎng)頁標題規(guī)范》你是否認真查看，有大量站點因為標題堆積關(guān)鍵詞，以及錯誤使用標點符號，被修改標題，從而造成頁面排名大量丟失。