裝修預算軟件seo優(yōu)化教程_爬行和抓取_跟蹤鏈接（二）

申請免費試用、咨詢電話：400-8352-114

爬行和抓取_跟蹤鏈接（二）

   為了抓取網(wǎng)上盡量多的頁面，搜索引擎蜘蛛會跟蹤頁面上的鏈接，從一個頁面爬到下一個頁面，就好像蜘蛛在蜘蛛網(wǎng)上爬行那樣，這也就是搜索引擎蜘蛛這個名稱的由來。整個互聯(lián)網(wǎng)是由相互鏈接的網(wǎng)站及頁面組成的。從理論上說，蜘蛛從任何一個頁面出發(fā)，順著鏈接都可以爬行到網(wǎng)上的所有頁面。當然，由于網(wǎng)站及頁面鏈接結構異常復雜，蜘蛛需要采取一定的爬行策略才能遍歷網(wǎng)上所有頁面。
   最簡單的爬行遍歷策略分為兩種，一種是深度優(yōu)先，另一種是廣度優(yōu)先。
   所謂深度優(yōu)先，指的是蜘蛛沿著發(fā)現(xiàn)的鏈接一直向前爬行，直到前面再也沒有其他鏈接，然后返回到第一個頁面，沿著另一個鏈接再一直往前爬行。
   廣度優(yōu)先是指蜘蛛在一個頁面上發(fā)現(xiàn)多個鏈接時，不是順著一個鏈接一直向前，而是把頁面上所有第一層鏈接都爬一遍，然后再沿著第二層頁面上發(fā)現(xiàn)的鏈接爬向第三層頁面。
   從理論上說，無論是深度優(yōu)先還是廣度優(yōu)先，只要給蜘蛛足夠的時間，都能爬完整個互聯(lián)網(wǎng)。在實際工作中，蜘蛛的帶寬資源、時間都不是無限的，也不可能爬完所有頁面。實際上最大的搜索引擎也只是爬行和收錄了互聯(lián)網(wǎng)的一小部分。
   深度優(yōu)先和廣度優(yōu)先通常是混合使用的，這樣既可以照顧到盡量多的網(wǎng)站（廣度優(yōu)先），也能照顧到一部分網(wǎng)站的內(nèi)頁（深度優(yōu)先）。
（上接，裝修公司seo優(yōu)化教程_爬行和抓取_蜘蛛（一））

延伸閱讀：

裝修公司商業(yè)系統(tǒng)建設_營銷信息_信息收集
裝修公司商業(yè)系統(tǒng)建設_營銷信息_信息管理
裝修公司商業(yè)系統(tǒng)建設_營銷信息_信息傳遞與應用
QQ：2558628650      442699841