最近網(wǎng)站的百度索引量和收錄明顯下降是怎么回事?

百度索引量是每個(gè)站長(zhǎng)都很關(guān)注的數(shù)據(jù),索引量的多少以為這參與百度網(wǎng)頁(yè)排名數(shù)據(jù)量的多少。今天早上在百度站長(zhǎng)平臺(tái)查看了一下索引數(shù)據(jù),令我大吃一驚,索引量在一夜之間減少了588,由之前的1187變成了599。當(dāng)然,在這個(gè)過程中,我在數(shù)據(jù)統(tǒng)計(jì)后臺(tái)看到的百度來路流量并沒有減少的跡象。按照百度官方的說法,這種情況站長(zhǎng)不用太在意。
在向下探討之前,先來看幾個(gè)基礎(chǔ)知識(shí)。
百度索引量是什么?百度的索引量是百度蜘蛛抓取網(wǎng)站的頁(yè)面數(shù);
百度索引量和收錄量的區(qū)別?百度索引是百度蜘蛛抓取網(wǎng)頁(yè)內(nèi)容建立的搜索候選頁(yè)面,這些候選頁(yè)面是未來增加網(wǎng)站收錄和更新網(wǎng)站頁(yè)面快照必須要有的。百度索引量在百度站長(zhǎng)平臺(tái)后臺(tái)查詢,收錄量直接使用site:(域名)
為什么索引量會(huì)大幅度下滑,這個(gè)問題朱海濤并不專業(yè)。看過站長(zhǎng)社區(qū)版主老呂的一篇文章,分析的相當(dāng)詳細(xì)。對(duì)比了下,唯一的可能性就是robots.txt文件。前幾天我在robots.txt文件總增加了一句"Disallow: /*?*",禁止收錄一切包含問號(hào)的鏈接,來屏蔽動(dòng)態(tài)鏈接。
除此之外,空間服務(wù)商還在.htaccess文件中增加一句代碼 "deny from 220.181.158.218".空間上設(shè)置這句代碼是防止網(wǎng)站惡意流量的。我查詢了下,這個(gè)ip地址對(duì)應(yīng)有可能是百度蜘蛛,不知道空間商在幫助我屏蔽惡意訪問流量的時(shí)候是否有考慮到這方面的因素。
不管怎樣,保險(xiǎn)起見,還是需要去站長(zhǎng)反饋中心去反饋下問題。站長(zhǎng)反饋的時(shí)候注意描述清楚,并且截圖說明問題。百度站長(zhǎng)平臺(tái)申訴反饋地址: http://zhanzhang.baidu.com/feedback
下面是百度站長(zhǎng)平臺(tái)社區(qū)版主老呂的文章,詳細(xì)說明了索引量為什么會(huì)下降的原因,并且給出了解決方法,值得每個(gè)站長(zhǎng)認(rèn)真的閱讀一遍。
索引量是流量的基礎(chǔ),索引量數(shù)據(jù)的每一個(gè)變動(dòng)都撥動(dòng)著站長(zhǎng)敏感的神經(jīng),“索引量下降之后該如何著手分析”一直是各位討論的熱門話題。這次站長(zhǎng)社區(qū)版主老呂又拔刀相助了,看看史上最全的百度索引量下降原因分析及解決方案吧
一、百度索引下降分析簡(jiǎn)圖
二、導(dǎo)致百度索引量下降的常見原因——網(wǎng)站方原因
1、內(nèi)容數(shù)據(jù)所在的網(wǎng)址url未規(guī)范統(tǒng)一
【自己站點(diǎn)url規(guī)范統(tǒng)一】
多域名都可以200狀態(tài)正常訪問網(wǎng)頁(yè)內(nèi)容;一域名下出現(xiàn)多種url形式可以訪問相同內(nèi)容,如大小寫url、url規(guī)則變更等。
解決:選擇主域名(或主url),其他域名下的所有url都301重定向到主域名(或主url),并站長(zhǎng)工具提交域名改版(或目錄url改版)
【外部平臺(tái)使用己站數(shù)據(jù)】
A、市場(chǎng)合作,站點(diǎn)數(shù)據(jù)調(diào)用到其他平臺(tái)上;內(nèi)容主動(dòng)外發(fā),推廣人員完整轉(zhuǎn)發(fā)自有內(nèi)容到高質(zhì)量平臺(tái)——這兩個(gè)原因都有可能導(dǎo)致搜索引擎收錄了外部平臺(tái)的內(nèi)容而拒絕了原網(wǎng)站內(nèi)容
解決:使用站長(zhǎng)平臺(tái)鏈接提交工具的主動(dòng)推送功能,及時(shí)提交網(wǎng)站新出現(xiàn)的鏈接,延遲將內(nèi)容調(diào)用到其他平臺(tái)的時(shí)間;
B、被鏡像,用戶通過其他舉辦主體的域名或url直接可訪問己方內(nèi)容。
解決:關(guān)注域名解析安全和服務(wù)器安全;綁定唯一可解析的域名或唯一可訪問的url;頁(yè)面內(nèi)容中鏈接使用絕對(duì)地址
2、站點(diǎn)受青睞度下降
【網(wǎng)頁(yè)內(nèi)容相關(guān)】
A、內(nèi)容質(zhì)量度下降
解決:提高內(nèi)容質(zhì)量度,詳見百度站長(zhǎng)學(xué)院相關(guān)內(nèi)容;杜絕簡(jiǎn)單拷貝,多做整合信息。
B、更新量及頻率下降
解決:穩(wěn)定的更新頻率,視內(nèi)容發(fā)展情況,擴(kuò)充編輯團(tuán)隊(duì),生產(chǎn)更多新內(nèi)容,讓網(wǎng)站索引避免下降,持續(xù)增加。(當(dāng)更新量及頻率下降明顯,那么配額就會(huì)下降,首先表現(xiàn)抓取頻次下降,導(dǎo)致索引量下降)
C、時(shí)效性信息消失
解決:時(shí)效性的信息,大部分一般在數(shù)據(jù)庫(kù)不會(huì)長(zhǎng)期保留,所以需要持續(xù)挖掘新的時(shí)效信息點(diǎn),整合相關(guān)內(nèi)容。
D、部分區(qū)域出現(xiàn)不良信息
解決:杜絕大量外鏈軟文、惡劣彈窗廣告、非法敏感類信息、專門針對(duì)搜索引擎作弊的內(nèi)容等
【觸犯懲罰算法】
解決:關(guān)注站長(zhǎng)工具消息和百度網(wǎng)頁(yè)搜索動(dòng)態(tài)。按官方公告說明來整改站點(diǎn),并進(jìn)行反饋,然后等待算法更新。
【特型url不被信任】
解決:定制各類url的索引查詢規(guī)則;定位索引量下降的特型url;排查該類url當(dāng)日、前一日、本周、歷史索引情況;找出未被入庫(kù)的數(shù)據(jù)可能存在的問題;處理完后,增強(qiáng)該類url與百度數(shù)據(jù)溝通(途徑有sitemap、批量提交url、數(shù)據(jù)推送等)。
【站點(diǎn)被搜索引擎信任度下降】
A、非法投票嫌疑(鏈接工廠等)
解決:珍惜自己頁(yè)面的投票權(quán),對(duì)于劣質(zhì)網(wǎng)頁(yè)堅(jiān)決不投票,盡量減少站點(diǎn)的導(dǎo)出鏈接。
B、主題變動(dòng)(如從教育領(lǐng)域跨入醫(yī)療領(lǐng)域)
解決:將舊領(lǐng)域的網(wǎng)頁(yè)進(jìn)行死鏈處理后向百度進(jìn)行提交,封禁相關(guān)舊url的被訪問權(quán),然后再上線新主題相關(guān)內(nèi)容,加強(qiáng)對(duì)百度的數(shù)據(jù)提交
C、受牽連
相同ip下非法站點(diǎn)偏多,同一域名所有人舉辦的網(wǎng)站大都被懲罰且情況惡劣等
解決:離開惡鄰,獲取搜索引擎的各產(chǎn)品的相關(guān)反饋方式,請(qǐng)求給予解禁,等待恢復(fù)正常索引。
D、政策性原因
如香港主機(jī)、國(guó)外主機(jī)站點(diǎn)由于各種你懂的原因,穩(wěn)定性可能較差
解決:國(guó)內(nèi)主機(jī)備案,合法符合政策經(jīng)營(yíng)
3、網(wǎng)頁(yè)模板相關(guān)
【主體內(nèi)容區(qū)域?qū)χ┲氲南拗啤?/strong>
解決:取消登陸查看信息等限制,讓蜘蛛便捷暢快的“采集”到己站數(shù)據(jù)
【啟用了對(duì)蜘蛛不友好的技術(shù)】
解決:對(duì)需要蜘蛛識(shí)別的內(nèi)容,不要啟用對(duì)蜘蛛不友好的技術(shù)來調(diào)用。
【響應(yīng)式模板干擾蜘蛛識(shí)別頁(yè)面類型(pc、移動(dòng))】
解決:提交特定的url對(duì)應(yīng)關(guān)系(盡量parrten級(jí));meta標(biāo)記移動(dòng)版本url及適合瀏覽的設(shè)備;自主適配;增強(qiáng)pc、移動(dòng)不同模板源碼標(biāo)簽的區(qū)分度,幫助百度識(shí)別頁(yè)面類型
4、源碼相關(guān)
【源碼錯(cuò)誤較嚴(yán)重,如編碼錯(cuò)誤、標(biāo)簽使用錯(cuò)誤等;源碼改動(dòng)嚴(yán)重,蜘蛛“采集”數(shù)據(jù)后重新觀察分析;某類url下的TD(網(wǎng)頁(yè)title、description)變化,如變化比例大、變化頁(yè)面量大,頁(yè)面進(jìn)行更改后會(huì)重走建索引庫(kù)流程,如果頁(yè)面質(zhì)量達(dá)不到建索引庫(kù)標(biāo)準(zhǔn)會(huì)從線上消失】
解決:校驗(yàn)源碼,準(zhǔn)確的源碼是蜘蛛“采集”數(shù)據(jù)進(jìn)行分析的基礎(chǔ);link內(nèi)鏈結(jié)構(gòu)、url地址形式、頁(yè)面主題、頁(yè)面各區(qū)域html標(biāo)記等盡量維持改動(dòng)前的情況;逐步、分期更換TD(網(wǎng)頁(yè)title、description),結(jié)合頁(yè)面主題、用戶實(shí)際需求來制定合理的TD,不欺騙不誤導(dǎo)用戶。
5、已入庫(kù)的url對(duì)蜘蛛狀態(tài)有變化
【robots聲明,禁止蜘蛛抓取】
解決:查看百度站長(zhǎng)工具robots及抓取情況。
【url規(guī)則變化,原有url無法訪問】
解決:特別是linux和win服務(wù)器之間的數(shù)據(jù)遷移,可能會(huì)出現(xiàn)大小寫url支持變化,確保各類url規(guī)則不變化。url必須重構(gòu)的時(shí)候,做好舊新url301重定向,站長(zhǎng)工具提交改版需求。
【提示錯(cuò)誤頁(yè)面】
解決:由于誤刪,則可以數(shù)據(jù)恢復(fù),并維持url對(duì)應(yīng)網(wǎng)頁(yè)內(nèi)容的更新變化,提高抓取頻次。如果確定要?jiǎng)h除,那么提交死鏈,刪除死鏈后,再robots禁止,這種情況的索引下降無需擔(dān)憂。
【被入侵】
解決:防止url對(duì)蜘蛛進(jìn)行非法跳轉(zhuǎn)操作;防止url對(duì)應(yīng)的網(wǎng)頁(yè)內(nèi)容對(duì)蜘蛛出現(xiàn)內(nèi)容大變化,特別是一些違法亂紀(jì)的內(nèi)容
6、DNS、服務(wù)器問題
【DNS問題】
dns不穩(wěn)定;dns不安全
解決:選擇可靠的dns服務(wù);溝通強(qiáng)調(diào)對(duì)蜘蛛的穩(wěn)定性;防止dns解析到非正常ip;防止解析的網(wǎng)站ip頻繁變動(dòng)。防止dns管理漏洞,導(dǎo)致被惡意解析;防止dns解析掛靠在小代理等技術(shù)能力、管理規(guī)范、道德法律約束都欠缺的平臺(tái)上。
【服務(wù)器問題】
A、可訪問性差
解決:盡量讓目標(biāo)地區(qū)所有運(yùn)營(yíng)商來路的用戶都能在3秒內(nèi)打開網(wǎng)站,最佳1秒內(nèi);監(jiān)控網(wǎng)站運(yùn)行狀態(tài),合理設(shè)置目標(biāo)地區(qū)的所有運(yùn)營(yíng)商監(jiān)控節(jié)點(diǎn)及監(jiān)控項(xiàng)目、監(jiān)控頻率
B、屏蔽百度ua或ip
解決:多利用百度站長(zhǎng)工具,查看百度抓取網(wǎng)頁(yè)的情況,可見
http://bbs.zhanzhang.baidu.com/thread-15392-1-3.html
C、防刷壓力值設(shè)定
解決:將蜘蛛解析到專用空間;如出現(xiàn)訪問陡增的ip,查看是否為蜘蛛再確定是否禁止訪問。
三、導(dǎo)致百度索引量下降的常見原因——百度方原因
1、配額再分配
同類數(shù)據(jù)量接近索引分配總額,配額量再分配,有升的就會(huì)有降的
解決:超過競(jìng)品,爭(zhēng)取高額分配。
2、數(shù)據(jù)異常錯(cuò)誤
A、錯(cuò)誤懲罰
應(yīng)對(duì)某類作惡行為而新算法上線,但由于蝴蝶效應(yīng),導(dǎo)致部分站點(diǎn)被錯(cuò)誤懲罰而清除大量索引。
解決:反饋百度方,請(qǐng)求解除懲罰。
B、地區(qū)性數(shù)據(jù)異常
部分地區(qū)數(shù)據(jù)抓取或查詢異常,導(dǎo)致誤判站點(diǎn)情況而清除相應(yīng)索引數(shù)據(jù)或輸出錯(cuò)誤索引量,如百度dns系統(tǒng)升級(jí)事件。
解決:反饋百度方,由百度檢查各地蜘蛛執(zhí)行情況。
C、接口調(diào)用數(shù)據(jù)錯(cuò)誤、數(shù)據(jù)丟失、數(shù)據(jù)備份衍生異常
解決:反饋百度方,由百度檢查相關(guān)數(shù)據(jù)情況。
說了這么多,有的站長(zhǎng)遇到百度索引量下降情況可能還是仍然不知道怎么辦。最基礎(chǔ)的做法是去百度站長(zhǎng)平臺(tái)查看下robots.txt的設(shè)置,然后分別抓取網(wǎng)站每個(gè)分類目錄和二級(jí)域名的網(wǎng)頁(yè),查看是否抓取正常和驗(yàn)證robots.txt文件是否設(shè)置有誤。
如果都沒有問題,再檢查下友情鏈接和外鏈數(shù)據(jù)。當(dāng)然如果網(wǎng)站轉(zhuǎn)載文章和抄襲文章過多或者原創(chuàng)質(zhì)量過低,這樣收錄量和索引量下降是遲早的事了。此外,網(wǎng)站索引量下降未必是壞事,如果我們的網(wǎng)站存在大量重復(fù)網(wǎng)頁(yè),動(dòng)態(tài)網(wǎng)頁(yè),和無效網(wǎng)頁(yè),這些網(wǎng)頁(yè)都被百度索引帶來的是副作用。
設(shè)置robots.txt文件(利用robots文件做SEO優(yōu)化,讓蜘蛛更好的抓取網(wǎng)站)必然會(huì)導(dǎo)致索引量的下降,這種情況下,索引量下降對(duì)我們網(wǎng)站是由好處的。
相關(guān)文章
網(wǎng)站修改TDK會(huì)降權(quán)嗎?事實(shí)證明修改TDK并不一定會(huì)使網(wǎng)站降權(quán)
關(guān)于修改網(wǎng)站TDK會(huì)不會(huì)導(dǎo)致網(wǎng)站降權(quán)的問題,很多站長(zhǎng)朋友也是眾說紛紜。那么網(wǎng)站修改TDK會(huì)降權(quán)嗎?事實(shí)證明修改TDK并不一定會(huì)使網(wǎng)站降權(quán),更多內(nèi)容請(qǐng)閱讀本文,希望對(duì)大家2016-04-11怎么看自己的網(wǎng)站是不是被baidu降權(quán)了?
怎么看自己的網(wǎng)站是不是被baidu降權(quán)了?自己的網(wǎng)站最近流量不是很好,想知道自己的網(wǎng)站是不是被降權(quán)了,該怎滿去查看呢?下面我們來看看判別網(wǎng)站是不是被baidu降權(quán)的方法2016-03-28網(wǎng)站關(guān)鍵詞排名突然大跌怎么辦? 網(wǎng)站關(guān)鍵詞排名下降的建議指導(dǎo)
網(wǎng)站關(guān)鍵詞排名突然大跌怎么辦?本文將提供網(wǎng)站關(guān)鍵詞排名下降的建議指導(dǎo)供大家了解,希望對(duì)大家有所幫助和啟發(fā)2016-03-04如何換域名與程序而不導(dǎo)致網(wǎng)站降權(quán)?
換域名一直是廣大站長(zhǎng)們最糾結(jié)的問題,當(dāng)手里有更好域名的時(shí)候,換還是不換呢?如何換域名與程序而不導(dǎo)致網(wǎng)站降權(quán)?下面我們一起來了解下吧2016-02-18如何讓你的網(wǎng)站在節(jié)假日后的流量不降反增?
如何讓你的網(wǎng)站在節(jié)假日后的流量不降反增?馬上就放春節(jié)假了,很多朋友們問到這個(gè)問題,下面小編就給大家詳細(xì)解答下,感興趣的朋友們可以過來看看2016-01-20引起網(wǎng)站降權(quán)的原因有哪些?導(dǎo)致網(wǎng)站降權(quán)的原因分析
引起網(wǎng)站降權(quán)的原因有哪些?有朋友問到這個(gè)問題,下面小編就給大家?guī)韺?dǎo)致網(wǎng)站降權(quán)的原因分析,感興趣的朋友們可以過來看看2016-01-19網(wǎng)站改動(dòng)會(huì)引起關(guān)鍵詞排名下降嗎? 網(wǎng)站變動(dòng)容易引起關(guān)鍵詞排名變動(dòng)的5
關(guān)于網(wǎng)站優(yōu)化、網(wǎng)站SEO話題,大家討論最多的那就是一樣關(guān)鍵詞排名,如何才能把排名做上去呀,怎么才能保證讓關(guān)鍵詞排名不掉啊,總體來說,網(wǎng)站優(yōu)化主要就是圍饒著關(guān)鍵詞的2016-01-14- 這篇文章主要介紹了淘寶隱形降權(quán)的原因分析及解決辦法,較為詳細(xì)的分析說明了淘寶降權(quán)的原因與相應(yīng)的解決辦法,需要的朋友可以參考下2016-01-13
站長(zhǎng)必看:網(wǎng)站降權(quán)如何做好數(shù)據(jù)分析處理
隨著搜索引擎的算法不斷更新,不單排名收錄提升難度增加,稍有不慎還會(huì)觸及百度的“法網(wǎng)”導(dǎo)致網(wǎng)站降權(quán),那網(wǎng)站降權(quán)后該怎么進(jìn)行恢復(fù)工作呢?網(wǎng)站降權(quán)怎么做好數(shù)據(jù)分析處理2016-01-05七大網(wǎng)站關(guān)鍵詞排名突然下降的原因以及應(yīng)對(duì)措施
這篇文章主要介紹了七大網(wǎng)站關(guān)鍵詞排名突然下降的原因以及應(yīng)對(duì)措施,需要的朋友可以參考下2016-01-04