首先跟大家先介紹下蜘蛛爬行的深度可以讓我們深層次的頁面容易被蜘蛛爬行并收錄更新,我們平常都會去一些地方引蜘蛛,但是蜘蛛一般會抓取兩三層,更深層的頁面要通過提高網站的權重,布局好網站的層次結構才可以讓蜘蛛抓取的更深更廣。
下面跟大家介紹5種可以提升蜘蛛抓取爬行深度及廣度的方法 一、網站層次結構 要利于蜘蛛爬行,首先得有一個清晰的層次結構。樹形結構是比較理想的網站結構,蜘蛛能夠很好的理解并爬行。采用首頁-索引頁-內容頁的形式有利于用戶在最短的時間內找到需求的信息。而且由于相關性極強的內容在同一欄目下,提高了聚合度,這樣更有利于蜘蛛的爬行整合。同時,樹形結構應該遵循層數盡可能少的原則。
二、網站導航、次導航、面包屑 網站導航是網站不可或缺的重要組成部分。采用統一的導航欄不僅有助于用戶體驗,更有助于蜘蛛識別。由于蜘蛛能有效識別并爬行css。因此,對于導航欄字體使用font-weight屬性是有效的。但切勿因為追求效果而采用js、ajax、inframe、flash等蜘蛛無法有效爬行的技術。次導航同樣可以使用font-weight屬性表明重要性,而面包屑導航也是必不可少的,要注意盡量避免使用url鏈接,而更多采用錨文本鏈接。
三、內容頁 新的內容應盡量出現在蜘蛛頻繁更新的地方。因此,內容頁應按ID或發布時間排序。而每篇內容頁應和其他頁面有效鏈接。可以在內容結束后加入上一篇、下一篇竄連上下篇文章。同時可以增加相關閱讀、推薦閱讀等欄目,這樣更有助于蜘蛛索引。
四、標簽、標簽云 標簽、標簽云是提高聚合類內容可爬行性的有效途徑。而標簽云采用不同顏色、不同大小、不同粗細以區分不同用戶關注度的內容。因該說無論從用戶體驗還是索引的主次都是有益的。但不應為追求標簽云效果,而采用jquery等技術,這樣就失去了標簽云的SEO意義。
五、Sitemap Sitemap文件對于蜘蛛的索引是很重要的。Sitemap的制作不是本文討論的重點。如果你的站點規模不是很大,請盡量采用。xml格式,并放置于根目錄下。百度sitemap工具正在內測中,因此暫時無法提交sitemap文件,我們只能采用提交網頁的方式,提交新的頁面。 以上就是5點可以提升蜘蛛抓取的方法,做seo要注重細節,處理好這些,面包培訓,可以讓蜘蛛更容易收錄我們的頁面,提升網站的權重。