• 客服
    咨詢
  • 公告3

    最新資訊 寶雞網(wǎng)絡(luò)公司最新新聞動(dòng)態(tài)
  • 關(guān)注

    關(guān)于時(shí)代 更多優(yōu)惠活動(dòng)等您來(lái)拿!
    寶雞網(wǎng)絡(luò)公司微信 掃一掃關(guān)注——微信公眾號(hào) 時(shí)代手機(jī)瀏覽 掃一掃立即手機(jī)瀏覽
  • 關(guān)閉
  • 頂部
  • 寶雞SEO:全面解讀BaiduSpider與站點(diǎn)死鏈

    時(shí)間:2016-11-05 15:56 來(lái)源:未知
      從最近幾周收到的提問(wèn)看,大家對(duì)死鏈越來(lái)越關(guān)注,畢竟死鏈直接關(guān)系到網(wǎng)站的抓取收錄和流量轉(zhuǎn)化。于是我們整合了學(xué)院之前的內(nèi)容,又專(zhuān)門(mén)對(duì)Baiduspider工程師進(jìn)行了咨詢,給大家一個(gè)完整的系列答復(fù)。
      問(wèn):robots屏蔽對(duì)阻止百度抓取死鏈?zhǔn)欠裼行?/div>
      答:當(dāng)然有效,百度嚴(yán)格遵守robots協(xié)議,若發(fā)現(xiàn)百度依然抓取,先確認(rèn)是否為Baiduspider,若確認(rèn),可以通過(guò)反饋中心進(jìn)行投訴。
      參考鏈接:《如何識(shí)別為百度spider》
      問(wèn):已被百度抓取的死鏈,可以通過(guò)robots屏蔽的方式讓百度刪除嗎?
      答:不建議你這樣做,最快最有效的方法是通過(guò)百度站長(zhǎng)平臺(tái)死鏈提交工具進(jìn)行處理
      問(wèn):我已經(jīng)通過(guò)死鏈工具進(jìn)行提交了,可是通過(guò)日志發(fā)現(xiàn)百度還是在抓我們的死鏈
      答:您提交規(guī)則后,spider為了驗(yàn)證鏈接是否真的死掉,需要抓一部分回來(lái)驗(yàn)證。
      問(wèn):百度對(duì)死鏈的抓取,對(duì)正常文章抓取的影響會(huì)有多大。
      答:這個(gè)沒(méi)有統(tǒng)一的標(biāo)準(zhǔn),如果你沒(méi)有設(shè)置robots也沒(méi)有向百度提交,死鏈量還特別巨大的時(shí)候,有可能會(huì)占用你網(wǎng)站大量抓取配額,導(dǎo)致正常內(nèi)容無(wú)法抓取。如果僅僅是spider為了驗(yàn)證死鏈規(guī)則抓一部分,那么對(duì)正常內(nèi)容不會(huì)造成影響。
      問(wèn):百度對(duì)死鏈的要求是什么?怎么設(shè)置死鏈效果最好?
      答:目前百度支持協(xié)議死鏈、內(nèi)容死鏈和跳轉(zhuǎn)死鏈,其中最效果最好的是協(xié)議死鏈。
      參考:《百度標(biāo)準(zhǔn)死鏈官方文檔》
      問(wèn):百度站長(zhǎng)平臺(tái)是否有工具幫助我們發(fā)現(xiàn)網(wǎng)站內(nèi)的未知死鏈?
      答:可以通過(guò)鏈接分析工具中的死鏈分析功能,還有抓取異常工具進(jìn)行發(fā)現(xiàn)分析。