百度索引量是每個站長都很關(guān)注的數(shù)據(jù),索引量的多少以為這參與百度網(wǎng)頁排名數(shù)據(jù)量的多少。今天早上在百度站長平臺查看了一下索引數(shù)據(jù),令我大吃一驚,索引量在一夜之間減少了588,由之前的1187變成了599。當(dāng)然,在這個過程中,我在數(shù)據(jù)統(tǒng)計后臺看到的百度來路流量并沒有減少的跡象。按照百度官方的說法,這種情況站長不用太在意。
在向下探討之前,先來看幾個基礎(chǔ)知識。
百度索引量是什么?百度的索引量是百度蜘蛛抓取網(wǎng)站的頁面數(shù);
百度索引量和收錄量的區(qū)別?百度索引是百度蜘蛛抓取網(wǎng)頁內(nèi)容建立的搜索候選頁面,這些候選頁面是未來增加網(wǎng)站收錄和更新網(wǎng)站頁面快照必須要有的。百度索引量在百度站長平臺后臺查詢,收錄量直接使用site:(域名)
為什么索引量會大幅度下滑,這個問題朱海濤并不專業(yè)??催^站長社區(qū)版主老呂的一篇文章,分析的相當(dāng)詳細(xì)。對比了下,唯一的可能性就是robots.txt文件。前幾天我在robots.txt文件總增加了一句"Disallow: /*?*",禁止收錄一切包含問號的鏈接,來屏蔽動態(tài)鏈接。
除此之外,空間服務(wù)商還在.htaccess文件中增加一句代碼 "deny from 220.181.158.218".空間上設(shè)置這句代碼是防止網(wǎng)站惡意流量的。我查詢了下,這個ip地址對應(yīng)有可能是百度蜘蛛,不知道空間商在幫助我屏蔽惡意訪問流量的時候是否有考慮到這方面的因素。
不管怎樣,保險起見,還是需要去站長反饋中心去反饋下問題。站長反饋的時候注意描述清楚,并且截圖說明問題。百度站長平臺申訴反饋地址:
下面是百度站長平臺社區(qū)版主老呂的文章,詳細(xì)說明了索引量為什么會下降的原因,并且給出了解決方法,值得每個站長認(rèn)真的閱讀一遍。
索引量是流量的基礎(chǔ),索引量數(shù)據(jù)的每一個變動都撥動著站長敏感的神經(jīng),“索引量下降之后該如何著手分析”一直是各位討論的熱門話題。這次站長社區(qū)版主老呂又拔刀相助了,看看史上最全的百度索引量下降原因分析及解決方案吧
一、百度索引下降分析簡圖
二、導(dǎo)致百度索引量下降的常見原因——網(wǎng)站方原因
1、內(nèi)容數(shù)據(jù)所在的網(wǎng)址url未規(guī)范統(tǒng)一
【自己站點url規(guī)范統(tǒng)一】
多域名都可以200狀態(tài)正常訪問網(wǎng)頁內(nèi)容;一域名下出現(xiàn)多種url形式可以訪問相同內(nèi)容,如大小寫url、url規(guī)則變更等。
解決:選擇主域名(或主url),其他域名下的所有url都301重定向到主域名(或主url),并站長工具提交域名改版(或目錄url改版)
【外部平臺使用己站數(shù)據(jù)】
A、市場合作,站點數(shù)據(jù)調(diào)用到其他平臺上;內(nèi)容主動外發(fā),推廣人員完整轉(zhuǎn)發(fā)自有內(nèi)容到高質(zhì)量平臺——這兩個原因都有可能導(dǎo)致搜索引擎收錄了外部平臺的內(nèi)容而拒絕了原網(wǎng)站內(nèi)容
解決:使用站長平臺鏈接提交工具的主動推送功能,及時提交網(wǎng)站新出現(xiàn)的鏈接,延遲將內(nèi)容調(diào)用到其他平臺的時間;
B、被鏡像,用戶通過其他舉辦主體的域名或url直接可訪問己方內(nèi)容。
解決:關(guān)注域名解析安全和服務(wù)器安全;綁定唯一可解析的域名或唯一可訪問的url;頁面內(nèi)容中鏈接使用絕對地址
2、站點受青睞度下降
【網(wǎng)頁內(nèi)容相關(guān)】
A、內(nèi)容質(zhì)量度下降
解決:提高內(nèi)容質(zhì)量度,詳見百度站長學(xué)院相關(guān)內(nèi)容;杜絕簡單拷貝,多做整合信息。
B、更新量及頻率下降
解決:穩(wěn)定的更新頻率,視內(nèi)容發(fā)展情況,擴(kuò)充編輯團(tuán)隊,生產(chǎn)更多新內(nèi)容,讓網(wǎng)站索引避免下降,持續(xù)增加。(當(dāng)更新量及頻率下降明顯,那么配額就會下降,首先表現(xiàn)抓取頻次下降,導(dǎo)致索引量下降)
C、時效性信息消失
解決:時效性的信息,大部分一般在數(shù)據(jù)庫不會長期保留,所以需要持續(xù)挖掘新的時效信息點,整合相關(guān)內(nèi)容。
D、部分區(qū)域出現(xiàn)不良信息
解決:杜絕大量外鏈軟文、惡劣彈窗廣告、非法敏感類信息、專門針對搜索引擎作弊的內(nèi)容等
【觸犯懲罰算法】
解決:關(guān)注站長工具消息和百度網(wǎng)頁搜索動態(tài)。按官方公告說明來整改站點,并進(jìn)行反饋,然后等待算法更新。
【特型url不被信任】
解決:定制各類url的索引查詢規(guī)則;定位索引量下降的特型url;排查該類url當(dāng)日、前一日、本周、歷史索引情況;找出未被入庫的數(shù)據(jù)可能存在的問題;處理完后,增強(qiáng)該類url與百度數(shù)據(jù)溝通(途徑有sitemap、批量提交url、數(shù)據(jù)推送等)。
【站點被搜索引擎信任度下降】
A、非法投票嫌疑(鏈接工廠等)
解決:珍惜自己頁面的投票權(quán),對于劣質(zhì)網(wǎng)頁堅決不投票,盡量減少站點的導(dǎo)出鏈接。
B、主題變動(如從教育領(lǐng)域跨入醫(yī)療領(lǐng)域)
解決:將舊領(lǐng)域的網(wǎng)頁進(jìn)行死鏈處理后向百度進(jìn)行提交,封禁相關(guān)舊url的被訪問權(quán),然后再上線新主題相關(guān)內(nèi)容,加強(qiáng)對百度的數(shù)據(jù)提交
C、受牽連
相同ip下非法站點偏多,同一域名所有人舉辦的網(wǎng)站大都被懲罰且情況惡劣等
解決:離開惡鄰,獲取搜索引擎的各產(chǎn)品的相關(guān)反饋方式,請求給予解禁,等待恢復(fù)正常索引。
D、政策性原因
如香港主機(jī)、國外主機(jī)站點由于各種你懂的原因,穩(wěn)定性可能較差
解決:國內(nèi)主機(jī)備案,合法符合政策經(jīng)營
3、網(wǎng)頁模板相關(guān)
【主體內(nèi)容區(qū)域?qū)χ┲氲南拗啤?/p>
解決:取消登陸查看信息等限制,讓蜘蛛便捷暢快的“采集”到己站數(shù)據(jù)
【啟用了對蜘蛛不友好的技術(shù)】
解決:對需要蜘蛛識別的內(nèi)容,不要啟用對蜘蛛不友好的技術(shù)來調(diào)用。
【響應(yīng)式模板干擾蜘蛛識別頁面類型(pc、移動)】
解決:提交特定的url對應(yīng)關(guān)系(盡量parrten級);meta標(biāo)記移動版本url及適合瀏覽的設(shè)備;自主適配;增強(qiáng)pc、移動不同模板源碼標(biāo)簽的區(qū)分度,幫助百度識別頁面類型
4、源碼相關(guān)
【源碼錯誤較嚴(yán)重,如編碼錯誤、標(biāo)簽使用錯誤等;源碼改動嚴(yán)重,蜘蛛“采集”數(shù)據(jù)后重新觀察分析;某類url下的TD(網(wǎng)頁title、description)變化,如變化比例大、變化頁面量大,頁面進(jìn)行更改后會重走建索引庫流程,如果頁面質(zhì)量達(dá)不到建索引庫標(biāo)準(zhǔn)會從線上消失】
解決:校驗源碼,準(zhǔn)確的源碼是蜘蛛“采集”數(shù)據(jù)進(jìn)行分析的基礎(chǔ);link內(nèi)鏈結(jié)構(gòu)、url地址形式、頁面主題、頁面各區(qū)域html標(biāo)記等盡量維持改動前的情況;逐步、分期更換TD(網(wǎng)頁title、description),結(jié)合頁面主題、用戶實際需求來制定合理的TD,不欺騙不誤導(dǎo)用戶。
5、已入庫的url對蜘蛛狀態(tài)有變化
【robots聲明,禁止蜘蛛抓取】
解決:查看百度站長工具robots及抓取情況。
【url規(guī)則變化,原有url無法訪問】
解決:特別是linux和win服務(wù)器之間的數(shù)據(jù)遷移,可能會出現(xiàn)大小寫url支持變化,確保各類url規(guī)則不變化。url必須重構(gòu)的時候,做好舊新url301重定向,站長工具提交改版需求。
【提示錯誤頁面】
解決:由于誤刪,則可以數(shù)據(jù)恢復(fù),并維持url對應(yīng)網(wǎng)頁內(nèi)容的更新變化,提高抓取頻次。如果確定要刪除,那么提交死鏈,刪除死鏈后,再robots禁止,這種情況的索引下降無需擔(dān)憂。
【被入侵】
解決:防止url對蜘蛛進(jìn)行非法跳轉(zhuǎn)操作;防止url對應(yīng)的網(wǎng)頁內(nèi)容對蜘蛛出現(xiàn)內(nèi)容大變化,特別是一些違法亂紀(jì)的內(nèi)容
6、DNS、服務(wù)器問題
【DNS問題】
dns不穩(wěn)定;dns不安全
解決:選擇可靠的dns服務(wù);溝通強(qiáng)調(diào)對蜘蛛的穩(wěn)定性;防止dns解析到非正常ip;防止解析的網(wǎng)站ip頻繁變動。防止dns管理漏洞,導(dǎo)致被惡意解析;防止dns解析掛靠在小代理等技術(shù)能力、管理規(guī)范、道德法律約束都欠缺的平臺上。
【服務(wù)器問題】
A、可訪問性差
解決:盡量讓目標(biāo)地區(qū)所有運(yùn)營商來路的用戶都能在3秒內(nèi)打開網(wǎng)站,最佳1秒內(nèi);監(jiān)控網(wǎng)站運(yùn)行狀態(tài),合理設(shè)置目標(biāo)地區(qū)的所有運(yùn)營商監(jiān)控節(jié)點及監(jiān)控項目、監(jiān)控頻率
B、屏蔽百度ua或ip
解決:多利用百度站長工具,查看百度抓取網(wǎng)頁的情況,可見
C、防刷壓力值設(shè)定
解決:將蜘蛛解析到專用空間;如出現(xiàn)訪問陡增的ip,查看是否為蜘蛛再確定是否禁止訪問。
三、導(dǎo)致百度索引量下降的常見原因——百度方原因
1、配額再分配
同類數(shù)據(jù)量接近索引分配總額,配額量再分配,有升的就會有降的
解決:超過競品,爭取高額分配。
2、數(shù)據(jù)異常錯誤
A、錯誤懲罰
應(yīng)對某類作惡行為而新算法上線,但由于蝴蝶效應(yīng),導(dǎo)致部分站點被錯誤懲罰而清除大量索引。
解決:反饋百度方,請求解除懲罰。
B、地區(qū)性數(shù)據(jù)異常
部分地區(qū)數(shù)據(jù)抓取或查詢異常,導(dǎo)致誤判站點情況而清除相應(yīng)索引數(shù)據(jù)或輸出錯誤索引量,如百度dns系統(tǒng)升級事件。
解決:反饋百度方,由百度檢查各地蜘蛛執(zhí)行情況。
C、接口調(diào)用數(shù)據(jù)錯誤、數(shù)據(jù)丟失、數(shù)據(jù)備份衍生異常
解決:反饋百度方,由百度檢查相關(guān)數(shù)據(jù)情況。
說了這么多,有的站長遇到百度索引量下降情況可能還是仍然不知道怎么辦。最基礎(chǔ)的做法是去百度站長平臺查看下robots.txt的設(shè)置,然后分別抓取網(wǎng)站每個分類目錄和二級域名的網(wǎng)頁,查看是否抓取正常和驗證robots.txt文件是否設(shè)置有誤。如果都沒有問題,再檢查下友情鏈接和外鏈數(shù)據(jù)。當(dāng)然如果網(wǎng)站轉(zhuǎn)載文章和抄襲文章過多或者原創(chuàng)質(zhì)量過低,這樣收錄量和索引量下降是遲早的事了。此外,網(wǎng)站索引量下降未必是壞事,如果我們的網(wǎng)站存在大量重復(fù)網(wǎng)頁,動態(tài)網(wǎng)頁,和無效網(wǎng)頁,這些網(wǎng)頁都被百度索引帶來的是副作用。設(shè)置robots.txt文件(利用robots文件做seo優(yōu)化,讓蜘蛛更好的抓取網(wǎng)站)必然會導(dǎo)致索引量的下降,這種情況下,索引量下降對我們網(wǎng)站是由好處的。
來源:朱海濤自媒體(微信/QQ號:81433982),原創(chuàng)文章如轉(zhuǎn)載,請注明本文鏈接:
申請創(chuàng)業(yè)報道,分享創(chuàng)業(yè)好點子。點擊此處,共同探討創(chuàng)業(yè)新機(jī)遇!