目前常用的鏈接有錨文本鏈接、超鏈接、純文本鏈接和圖像鏈接。如何被爬行器爬行是一個自動提取網頁的程序，如百度蜘蛛。要使您的網站包含更多的網頁，您必須首先讓爬蟲程序對網頁進行爬行。如果你的網站頁面定期更新，爬蟲會更頻繁地訪問頁面，而高質量的內容是爬蟲喜歡抓取的，特別是原始內容。蜘蛛很快就會爬上網站。網站和網頁權重。這一定是最重要的。

做SEO的，都要想讓自己更多的頁面被收錄，想方設法吸引蜘蛛來抓取。如果不能抓取所有頁面，蜘蛛所要做的就是盡量抓取重要頁面。那些頁面會被人為比較重要呢？

有幾方面的音響因素：

一、網站的頁面和權重

質量高，資格老的網站被認為權重比較高，這種網站上的頁面被爬行的深度也會比較高，所以會有更多的頁面被收錄。

二、頁面更新度

蜘蛛每次爬行都會把頁面數據儲存起來。如果第二次爬行發現頁面與第一次收錄完全一樣，說明頁面沒有更新，多次抓取后，蜘蛛會對頁面更新頻率有所了解，不常更新的頁面，蜘蛛也就沒有必要經常抓取。如果頁面內容經常更新，蜘蛛就會更加頻繁的訪問這種頁面，頁面上出現的新連接，也自然會被蜘蛛更快的跟蹤，抓取新頁面。

三、導入鏈接

無論是外部鏈接，還是同一個網站的內部鏈接，要被蜘蛛抓取，就必須有導入鏈接進入頁面，否則蜘蛛根本就沒有機會知道頁面的存在。高質量的導入鏈接也經常使頁面上的導出鏈接被深度爬行度增加。

四、與首頁的點擊距離

一般來說網站上權重最高的是首頁，大部分外鏈都是指向首頁的，蜘蛛訪問最頻繁的也是首頁。因此，離首頁點擊距離越近，頁面權重就越高，蜘蛛爬行的機會也越大。

五、URL結構

頁面權重是在收錄并進行迭代計算后才知道的，那么前面說的頁面權重高有利于被抓取，搜索引擎蜘蛛在抓取前怎么知道頁面權重呢？所以蜘蛛要進行預判，除了鏈接，與首頁距離、歷史數據等因素外，短的、層次淺的URL也可能被直觀的認為在網站上的權重相對較高。

六、引蜘蛛方式：

1、文本鏈接

2、超鏈

3、錨文本鏈接

這幾種鏈接形式都可以引蜘蛛來訪網頁，只要這些鏈接都沒被Nofollow，就會引導蜘蛛來訪和傳遞權重，其中錨文本鏈接為最佳引蜘蛛方式，有利于關鍵詞排名，例如友情鏈接中的關鍵詞錨文本。

引蜘蛛不管哪種形式的鏈接都是一樣的！無非就是加了NF標簽的不能傳遞權重~ 但是錨鏈接更加適合用戶點擊的機制，所以比較好！如果你只是單獨的想引蜘蛛，建議去你去哪種能夠帶連接的論壇！

對于重量大、資歷老、權威大的蜘蛛，一定要特別對待。這種網站有很高的爬行頻率，我們都知道搜索引擎蜘蛛，為了保證效率高，不會爬行網站的所有頁面。網站的權重越高，爬行的深度就越高，相應地可以爬行的頁面越多。