目前常用的鏈接有錨文本鏈接、超鏈接、純文本鏈接和圖像鏈接。如何被爬行器爬行是一個自動提取網(wǎng)頁的程序，如百度蜘蛛。要使您的網(wǎng)站包含更多的網(wǎng)頁，您必須首先讓爬蟲程序?qū)W(wǎng)頁進(jìn)行爬行。如果你的網(wǎng)站頁面定期更新，爬蟲會更頻繁地訪問頁面，而高質(zhì)量的內(nèi)容是爬蟲喜歡抓取的，特別是原始內(nèi)容。蜘蛛很快就會爬上網(wǎng)站。網(wǎng)站和網(wǎng)頁權(quán)重。這一定是最重要的。

做SEO的，都要想讓自己更多的頁面被收錄，想方設(shè)法吸引蜘蛛來抓取。如果不能抓取所有頁面，蜘蛛所要做的就是盡量抓取重要頁面。那些頁面會被人為比較重要呢？

有幾方面的音響因素：

一、網(wǎng)站的頁面和權(quán)重

質(zhì)量高，資格老的網(wǎng)站被認(rèn)為權(quán)重比較高，這種網(wǎng)站上的頁面被爬行的深度也會比較高，所以會有更多的頁面被收錄。

二、頁面更新度

蜘蛛每次爬行都會把頁面數(shù)據(jù)儲存起來。如果第二次爬行發(fā)現(xiàn)頁面與第一次收錄完全一樣，說明頁面沒有更新，多次抓取后，蜘蛛會對頁面更新頻率有所了解，不常更新的頁面，蜘蛛也就沒有必要經(jīng)常抓取。如果頁面內(nèi)容經(jīng)常更新，蜘蛛就會更加頻繁的訪問這種頁面，頁面上出現(xiàn)的新連接，也自然會被蜘蛛更快的跟蹤，抓取新頁面。

三、導(dǎo)入鏈接

無論是外部鏈接，還是同一個網(wǎng)站的內(nèi)部鏈接，要被蜘蛛抓取，就必須有導(dǎo)入鏈接進(jìn)入頁面，否則蜘蛛根本就沒有機(jī)會知道頁面的存在。高質(zhì)量的導(dǎo)入鏈接也經(jīng)常使頁面上的導(dǎo)出鏈接被深度爬行度增加。

四、與首頁的點(diǎn)擊距離

一般來說網(wǎng)站上權(quán)重最高的是首頁，大部分外鏈都是指向首頁的，蜘蛛訪問最頻繁的也是首頁。因此，離首頁點(diǎn)擊距離越近，頁面權(quán)重就越高，蜘蛛爬行的機(jī)會也越大。

五、URL結(jié)構(gòu)

頁面權(quán)重是在收錄并進(jìn)行迭代計算后才知道的，那么前面說的頁面權(quán)重高有利于被抓取，搜索引擎蜘蛛在抓取前怎么知道頁面權(quán)重呢？所以蜘蛛要進(jìn)行預(yù)判，除了鏈接，與首頁距離、歷史數(shù)據(jù)等因素外，短的、層次淺的URL也可能被直觀的認(rèn)為在網(wǎng)站上的權(quán)重相對較高。

六、引蜘蛛方式：

1、文本鏈接

2、超鏈

3、錨文本鏈接

這幾種鏈接形式都可以引蜘蛛來訪網(wǎng)頁，只要這些鏈接都沒被Nofollow，就會引導(dǎo)蜘蛛來訪和傳遞權(quán)重，其中錨文本鏈接為最佳引蜘蛛方式，有利于關(guān)鍵詞排名，例如友情鏈接中的關(guān)鍵詞錨文本。

引蜘蛛不管哪種形式的鏈接都是一樣的！無非就是加了NF標(biāo)簽的不能傳遞權(quán)重~ 但是錨鏈接更加適合用戶點(diǎn)擊的機(jī)制，所以比較好！如果你只是單獨(dú)的想引蜘蛛，建議去你去哪種能夠帶連接的論壇！

對于重量大、資歷老、權(quán)威大的蜘蛛，一定要特別對待。這種網(wǎng)站有很高的爬行頻率，我們都知道搜索引擎蜘蛛，為了保證效率高，不會爬行網(wǎng)站的所有頁面。網(wǎng)站的權(quán)重越高，爬行的深度就越高，相應(yīng)地可以爬行的頁面越多。