加入收藏RSS訂閱SEO教程 SEO優化 SEO自學 網站優化
你的位置:首頁 ? SEO教程 ? 正文

搜索引擎爬行的規律是什么?搜索引擎抓取網頁的規律是什么?

選擇字號: 超大 標準 發布時間:2014-8-15 11:10:35 | 作者:Searcheo | 0個評論 | 人瀏覽

本文地址:http://www.umpuhz.live/post/196.html 轉載請注明出處!

    當今兩大最受歡迎的搜索引擎是google和百度。大多數人都知道搜索引擎收錄頁面是靠蜘蛛爬行來收錄的。所以了解搜索引擎的變化是必需的。搜索引擎蜘蛛是人們編寫出來的機器,肯定存在著某種規律。

    

    一般情況下,一個新上線的網站需要一段時間才能被收錄。當搜索引擎收錄網站時,一般是從首頁開始,接著順著首頁再進入內頁。搜索引擎很花心,它不是一次性將網站全部爬行完,而是分不同的時間段進行爬行,然后計算出蜘蛛在網站的活動時間及時間的長短。新站的網頁即使被爬行也不會馬上被出來,需要經過搜索引擎反復計算,確認網站確實有必要收錄,這時才會把網頁放出來,通常新站的網站快照和收錄頁面都是晚一個月或者更久才會被放出來。

    一定要牢記下面的這段話:在搜索引擎蜘蛛爬行網站的時候,千萬不能出現網站打不開或者有死鏈的情況,如果出現這種情況,搜索引擎會中止對網站的爬行,以后什么時候再來就不一定了。

    有很多人有一個不好的習慣,也有一個錯誤的思想,認為域名的年齡越長,越受到搜索引擎的歡迎。的確是這樣的,但是有個前提,網站沒有被過度優化、沒有死鏈等。有好多人,網站剛剛做完首頁,立刻上線,首頁上的鏈接大部分都是死鏈,搜索引擎蜘蛛進入后,爬行網站還是原樣,這樣往返幾次,搜索引擎蜘蛛會因為抓取不到新的有價值的內容,并且由于死鏈太多,會最終放棄爬行這個網站。

    網站成功上線一段時間后,才會進入穩定階段。百度和google會給新站一段時間的考核期,考核期通過后,才認為網站是一個長期的網站,這個時間為1-3個月或者更久。處在穩定期的網站,搜索引擎蜘蛛會經常來光顧,它們還是和初期階段一樣,從首頁進入網站爬行。但是百度和google略有不同,如果百度發現網站首頁的內容沒有變化,會立刻停止爬行;而google不是這樣,即使發現網站首頁沒有變化,還是照常順著首頁的鏈接繼續自行,這就是有的時候網站google比百度收錄頁面多的原因之一。

    這里強調一下,當更新網站的內容時,一定要在網站首頁中顯示出來,否則百度蜘蛛不會收錄更新的網頁,因為首頁沒有變化,百度蜘蛛不在內頁爬行,所以不知道有新的網頁產生。這也是有的企業網站常常犯的,首頁的內容是死的,不能變化,導致網站的收錄量一直沒有變化。穩定階段的網站快照和收錄頁面一般是近兩天內被放出來的。

    搜索引擎蜘蛛就是網站的上司,和上司搞好關系,在各個方面都會得到照顧;如果關系沒有處到位。他會一直找你麻煩。搜索引擎也是一樣,它對網站印象好,會經常來,經常更新網站的快照,經常收錄網頁,如果對網站印象不好,只要網站稍微有不好的地方,就會馬上將網站封了。

標簽:  

SEO教程網

猜你喜歡

發表評論

必填

選填

選填

必填,不填不讓過哦,嘻嘻。

記住我,下次回復時不用重新輸入個人信息

◎歡迎參與討論,請在這里發表您的看法、交流您的觀點。

站長推薦的文章
瀏覽最多的文章
無覓相關文章插件,快速提升流量 体彩app官方网站