加入收藏RSS訂閱SEO教程 SEO優化 SEO自學 網站優化
你的位置:首頁 ? SEO教程 ? 正文

搜索引擎蜘蛛抓取過的頁面還會二次抓取嗎?

選擇字號: 超大 標準 發布時間:2014-12-18 14:26:18 | 作者:Searcheo | 0個評論 | 人瀏覽

本文地址:http://www.umpuhz.live/post/816.html 轉載請注明出處!

  搜索引擎蜘蛛抓取過的頁面還會二次抓取嗎?肯定會的!搜索引擎蜘蛛把網頁抓取到本地,該網頁被分析索引并參與了排名,并不意味著搜索引擎蜘蛛對 該網頁的工作就已結束?,F在的互聯網信息瞬息萬變,頁面的更新改動或者刪除都會使已經抓取的頁面失效,所以搜索引擎蜘蛛對網頁進行再抓取也是必須的,不 過,要使搜索引擎蜘蛛對你的網頁進行二次抓取應該具備以下四點:用戶體驗(UE)、歷史更新頻率、網頁類型和網頁權重。

  1、 用戶體驗

   整個互聯網的網頁數量是巨大的,已被百度抓取并索引的中文網頁應該是千億級別的,但是對用戶有用的信息卻是鳳毛麟角。當用戶進行搜索時,返回的結果能否 滿足用戶的搜索需求直接關系到用戶體驗度的好壞。試想,用戶看到的頁面信息顯示的是過時的信息,用戶對搜索引擎的印象又會是如何呢?為了能夠給用戶提供及 時的信息,搜索引擎爬蟲需要對網頁進行再抓取和更新。理論上,這些網頁被搜索到的次數越多,再次抓取該頁面的頻率就會越高。相關閱讀:什么是UEO?用戶體驗優化(UEO)三個核心思路闡述!

  2、 歷史更新頻率

  搜索引擎有自己的套發現某網頁更新頻率的策略。搜索引擎蜘蛛的再次抓取是為了發現頁面上的新變化。如果頁面上沒有新的內容出現,搜索引擎則會降低對該頁面的抓取頻率,如果接連無新內容出現,搜索引擎甚至會停止對該頁面的索引。

  還有一點需要指出的是,所謂的頁面變化是指頁面的主體內容的變化,非主體內容的變化,不在搜索引擎爬蟲再次抓取之列。

  3、 網頁類型

   不同的網頁類型有不同的更新頻率。在同一個站點內網站首頁,目錄頁,專題頁和問作業的更新頻率肯定是不同的。所以對于同一站點內的網頁,是搜索引擎蜘蛛 也會采用不同的抓取頻率。一般情況下首頁和目錄頁是搜索引擎蜘蛛經常光顧的頁面,根據專題頁面的實效性或者其他特征,搜索引擎蜘蛛可能會在某一時間段內進 行頻繁抓取,實效性過后就會降低對其的抓取頻率;對于文章頁搜索引擎蜘蛛很可能第一次來過之后就不會再來了。

  網頁很多,但是網頁的類型 卻并不是所想象的那么多,每個類型的網頁都會有自己的布局和更新規律,搜索引擎有足夠的能力發現網頁的類型并設置合理的再次抓取頻率。網頁類型歸類和網頁 歷史更新頻率是被綜合使用最多的,一般在同一站點內同類網頁會有相同的更新頻率,者也會方便搜索引擎蜘蛛對網頁更新頻率的判斷。

  4、 網頁權重

  網頁權重也是決定抓取頻率的重要因素。權重高的網頁抓取的頻率高,反之,抓取的頻率就低。用戶體驗度也是決定網頁權重的因素。在其他條件對等的情況下,權重高的網頁抓取頻率要比權重低的網頁抓取頻率高。

標簽:        

SEO教程網

猜你喜歡

發表評論

必填

選填

選填

必填,不填不讓過哦,嘻嘻。

記住我,下次回復時不用重新輸入個人信息

◎歡迎參與討論,請在這里發表您的看法、交流您的觀點。

站長推薦的文章
瀏覽最多的文章
無覓相關文章插件,快速提升流量 体彩app官方网站