抓取異常對(duì)網站有哪些影(yǐng)響?首頁站點出現抓取異常、無法被抓取、返回碼設置錯誤、死鏈接過多(duō)、無效頁面、重定向過多(duō)等,直接影(yǐng)響搜索引擎對(duì)網站抓取出現異常。将直接導緻搜索引擎會認爲網站存在用(yòng)戶體驗上的(de)缺陷,并降低對(duì)網站的(de)評價,在抓取、索引、權重上都會受到一定程度的(de)負面影(yǐng)響,最終影(yǐng)響到網站從百度獲取的(de)流量。所以今天微信公衆号包裝小編整理(lǐ)了(le)兩點内容,希望可(kě)以幫互助到大(dà)家。
抓取異常對(duì)網站的(de)影(yǐng)響:
1.有那些抓取異常影(yǐng)響
2.網站抓取異常是哪些原因造成的(de)
對(duì)于大(dà)量内容無法正常抓取的(de)網站,搜索引擎會認爲網站存在用(yòng)戶體驗上的(de)缺陷,并降低對(duì)網站的(de)評價,在抓取、索引、權重上都會受到一定程度的(de)負面影(yǐng)響,最終影(yǐng)響到網站從百度獲取的(de)流量。那麽現在微信公衆号包裝小編就看你們登場(chǎng)了(le)
一、有那些抓取異常影(yǐng)響
1、什(shén)麽是死鏈
無法對(duì)用(yòng)戶提供任何有價值信息的(de)頁面就是死鏈接,包括協議(yì)死鏈和(hé)内容死鏈兩種形式。協議(yì)死鏈:頁面的(de)TCP協議(yì)狀态/HTTP協議(yì)狀态明(míng)确表示的(de)死鏈,常見的(de)如404、403、503狀态等。内容死鏈:服務器返回狀态是正常的(de),但内容已心問迗經變更爲不存在、已删除或需要權限等與原内容無關的(de)信息頁面。對(duì)于死鏈,建議(yì)通(tōng)過百度站長(cháng)平台--死鏈工具提交死鏈的(de)方式進行處理(lǐ),以便搜索引擎更快(kuài)地發現死鏈,減少死鏈對(duì)用(yòng)戶以及搜索引擎造成的(de)負面影(yǐng)響。
2、什(shén)麽是IP禁封
限制網絡的(de)出口IP地址,禁止該IP段的(de)使用(yòng)者進行内容訪問,即爲IP禁封。3.什(shén)麽是UA禁封? UA即爲用(yòng)戶代理(lǐ)(User-Agent),服務器通(tōng)過UA識别訪問者的(de)身份。當網站針對(duì)指定UA的(de)訪問,返回異常頁面(如403,500)或跳轉到其他(tā)頁面的(de)情況,即爲UA禁封。
3、什(shén)麽是異常重定向
将網絡請求重新指向其他(tā)位置即爲重定向。異常重定向指的(de)是以下(xià)幾種情況當前該頁面爲無效頁面(内容已删除、死鏈等),直接跳轉到前一目錄或者首頁,百度建議(yì)站長(cháng)将該無效頁面的(de)入口超鏈接删除掉重定向到出錯或者無效頁面重定向的(de)跳轉超過3次,也(yě)爲異常注意:對(duì)于長(cháng)時(shí)間跳轉到其他(tā)域名的(de)情況,如網站更換域名,百度建議(yì)使用(yòng)301跳轉協議(yì)進行設置。
4、還(hái)有哪些其他(tā)異常
針對(duì)百度refer的(de)異常:網頁針對(duì)來(lái)自百度的(de)refer返回不同于正常内容的(de)行爲。針對(duì)百度ua的(de)異常:網頁對(duì)百度UA返回不同于頁面原内容的(de)行爲。抓取異常對(duì)網站的(de)影(yǐng)響有哪些? 對(duì)于大(dà)量内容無法正常抓取的(de)網站,搜索引擎會認爲網站存在用(yòng)戶體驗上的(de)缺陷,并降低對(duì)網站的(de)評價,在抓取、索引、權重上都會受到一定程度的(de)負面影(yǐng)響,最終影(yǐng)響到網站從百度獲取的(de)流量。
二、網站抓取異常帶來(lái)的(de)影(yǐng)響
對(duì)于大(dà)量内容無法正常抓取的(de)網站,公衆平台導航,百度搜索引擎會認爲網站存在用(yòng)戶體驗上的(de)缺陷,并降低對(duì)網站的(de)評價,在抓取、索引、排序上都會受到一定程度的(de)負面影(yǐng)響,最終影(yǐng)響到網站從百度獲取的(de)流量。
1、網絡運營商異常
網絡運營商分(fēn)電信和(hé)聯通(tōng)兩種,Baiduspider通(tōng)過電信或網通(tōng)無法訪問您的(de)網站。如果出現這(zhè)種情況,您需要與網絡服務運營商進行聯系,或者購(gòu)買擁有雙線服務的(de)空間或者購(gòu)買cdn服務。
2、DNS異常
當Baiduspider無法解析您網站的(de)IP時(shí),會出現DNS異常。可(kě)能是您的(de)網站IP地址錯誤,或者域名服務商把Baiduspider封禁。請使用(yòng)WHOIS或者host查詢自己網站IP地址是否正确且可(kě)解析,如果不正确或無法解析,請與域名注冊商聯系,更新您的(de)IP地址。
3、UA封禁
UA即爲用(yòng)戶代理(lǐ)(User-Agent),服務器通(tōng)過UA識别訪問者的(de)身份。當網站針對(duì)指定UA的(de)訪問,返回異常頁面(如403,500)或跳轉到其他(tā)頁面的(de)情況,即爲UA封禁。當您的(de)網站不希望Baiduspider訪問時(shí),才需要該設置,如果您希望Baiduspider訪問您的(de)網站,useragent相關的(de)設置中是否有Baiduspider UA,并及時(shí)修改。
4、服務器連接異常
服務器連接異常會有兩種情況:一種是站點不穩定,Baiduspider嘗試連接您網站的(de)服務器時(shí)出現暫時(shí)無法連接的(de)情況;一種是Baiduspider一直無法連接上您網站的(de)服務器。
造成服務器連接異常的(de)原因通(tōng)常是您的(de)網站服務器過大(dà),超負荷運轉。也(yě)有可(kě)能是您的(de)網站運行不正常,請檢查網站的(de)web服務器(如apache、iis)是否安裝且正常運行,并使用(yòng)浏覽器檢查主要頁面能否正常訪問。您的(de)網站和(hé)主機還(hái)可(kě)能阻止了(le)Baiduspider的(de)訪問,您需要檢查網站和(hé)主機的(de)防火牆。
5、異常跳轉
将網絡請求重新指向其他(tā)位置即爲跳轉。異常跳轉指的(de)是以下(xià)幾種情況:
1)當前該頁面爲無效頁面(内容已删除、死鏈等),直接跳轉到前一目錄或者首頁,百度建議(yì)站長(cháng)将該無效頁面的(de)入口超鏈接删除掉
2)跳轉到出錯或者無效頁面
6、IP封禁
P封禁爲:限制網絡的(de)出口IP地址,禁止該IP段的(de)使用(yòng)者進行内容訪問,在這(zhè)裏特指封禁了(le)BaiduspiderIP。當您的(de)網站不希望Baiduspider訪問時(shí),才需要該設置
如果您希望Baiduspider訪問您的(de)網站,請檢查相關設置中是否誤添加了(le)BaiduspiderIP。也(yě)有可(kě)能是您網站所在的(de)空間服務商把百度IP進行了(le)封禁,這(zhè)時(shí)您需要聯系服務商更改設置。
7、死鏈
頁面已經無效,無法對(duì)用(yòng)戶提供任何有價值信息的(de)頁面就是死鏈接,包括協議(yì)死鏈和(hé)内容死鏈兩種形式:
協議(yì)死鏈:頁面的(de)TCP協議(yì)狀态/HTTP協議(yì)狀态明(míng)确表示的(de)死鏈,常見的(de)如404、403、503狀态等。
内容死鏈:服務器返回狀态是正常的(de),但内容已經變更爲不存在、已删除或需要權限等與原内容無關的(de)信息頁面。
對(duì)于死鏈,我們建議(yì)站點使用(yòng)協議(yì)死鏈,并通(tōng)過百度站長(cháng)平台--死鏈工具向百度提交,以便百度更快(kuài)地發現死鏈,減少死鏈對(duì)用(yòng)戶以及搜索引擎造成的(de)負面影(yǐng)響。
8、其他(tā)異常
1)針對(duì)百度refer的(de)異常:網頁針對(duì)來(lái)自百度的(de)refer返回不同于正常内容的(de)行爲。
2)針對(duì)百度ua的(de)異常:網頁對(duì)百度UA返回不同于頁面原内容的(de)行爲。
3)JS跳轉異常:網頁加載了(le)百度無法識别的(de)JS跳轉代碼,使得(de)用(yòng)戶通(tōng)過搜索結果進入頁面後發生了(le)跳轉的(de)情況。
以上兩點内容就是今天微信公衆号包裝小編整理(lǐ)的(de)
抓取異常對(duì)網站有哪些影(yǐng)響全部内容了(le),希望大(dà)家看完今天這(zhè)篇文章(zhāng)後,可(kě)以對(duì)大(dà)家今後的(de)事情有所幫助。