大赢家彩票網絡: 荊州做網站| 荊州網站建設| 荊州營銷型網站建設| 網站地圖|

百度網頁不收錄都是邀請制惹的禍

來源:成都網站建設 发布日期:2017-01-23 23:00 点击数:

前方高能——本篇文章是攻城獅們根據日常收到的case整理而來,親自編寫,希望站長親們給個好評哦!

平台攻城獅近日接到了百度內部用戶的反饋,說lvshi.baidu.com站點的收錄情況比較差,希望協助追查原因。

攻城獅追查的過程如下:

首先通過site語法檢索,發現收錄量確實比較少,只有11條,而且還發現一部分是死鏈數據。

然後根據用戶反饋的部分url,檢測發現這批鏈接在20161226日當天已經就已經抓取回來了,首次抓取上是沒有問題;

http://lvshi.baidu.com/help/about/story

http://lvshi.baidu.com/help/about/contact

http://lvshi.baidu.com/help/user/guide

http://lvshi.baidu.com/help/user/question

http://lvshi.baidu.com/help/user/feedback

http://lvshi.baidu.com/help/cooperation/provider

http://lvshi.baidu.com/goods?categoryid=1

http://lvshi.baidu.com/goods/33

緊接著發現這批網頁都被百度爬蟲判定爲空短頁面,從網頁庫中獲取當時的抓取頁面,檢查發現這些頁面抓取回來的內容是一樣的,都是提示讓輸入邀請碼。

被百度爬蟲判斷爲空短頁面,肯定是不能被百度搜索收錄的。

有站長可能會問,那等網站全部開放後,是不是就可以收錄了呢?對于百度爬蟲來說,當對一個網站抓取後發現大面積都是低值的空短頁面時,爬蟲會認爲這個站點的整體價值比較低,那麽在後面的抓取流量分布上會降低,導致針對該站點的頁面更新會比較慢,進而收錄也會比較慢。這裏學院君再次強調一下,不要讓爬蟲給站點畫上不優質的標簽哦,後果很嚴重!

那麽該如何避免呢?方法其實比較簡單,網站在邀請測試階段使用robots封禁就可以。


文章引用:/question/20170123111.html
上一篇:百度的這些違規落地頁廣告,你都知道嗎?
下一篇:網站改版常見錯誤與解決辦法


@2008-2018 gwfotd.com 大赢家彩票荊州做網站 版權所有 鄂ICP備16007205號
公司微信公众号

掃一掃,關注微信

大赢家彩票網絡: 荊州做網站| 荊州網站建設| 荊州營銷型網站建設| 荊州網站設計| 荊州網絡推廣| 荊州SEO| AppStore推廣| 荆州手机網站建設| 荆州微信網站建設| 小程序開發|
在線客服
服務熱線:
在線客服
微信客服