“nofollow”和“robots”作為seo常用的手法，很多人都傻傻分不清楚，他們的功能不是屏蔽和禁止一些頁面和鏈接的抓取嗎？“nofollow”和“robots”之間的區(qū)別還是挺大的，“nofollow”是屏蔽一些鏈接的抓取，而“robots”是屏蔽站內(nèi)的一些頁面。下面小編帶著大家詳細(xì)的了解一下它們之間的不同點(diǎn)。

一、“robots”應(yīng)該放在哪里？

“robots”的“robots.txt”的簡稱，這個文件一般放置在網(wǎng)站的根目錄里面，蜘蛛會根據(jù)這個文件來確定訪問網(wǎng)站的范圍。

二、“nofollow”的使用

“nofollow”是HTML頁面中a標(biāo)簽的屬性值。這個標(biāo)簽的意義是告訴搜索引擎"不要追蹤此網(wǎng)頁上的鏈接或不要追蹤此特定鏈接"�！皀ofollow”是如何使用的呢？

1、將"nofollow"寫在網(wǎng)頁上的meta標(biāo)簽上，用來告訴搜索引擎不要抓取網(wǎng)頁上的所有外部和包括內(nèi)部鏈接。

2、將"nofollow"放在超鏈接中，告訴搜索引擎不要抓取特定的鏈接。

（1）除了rel='nofollow'還有兩種鏈接屬性形式，一種是rel='external'，另一種是rel='external nofollow'。這兩種分別代表什么意思呢？又有何區(qū)別呢？

a、rel='external'

此屬性的意思是告訴搜索引擎，這個鏈接不是本站鏈接，其實(shí)作用相當(dāng)于target=‘_blank’。

b、rel='external nofollow'

其實(shí)上面已經(jīng)說過rel='nofollow' 和 rel='external' 兩種屬性的所代表的意思了。這個屬性基本上是相當(dāng)于將兩種屬性結(jié)合起來，大致可以解釋為 “這個鏈接非本站鏈接，不要爬取也不要傳遞權(quán)重”。

三、“nofollow”和“robots”區(qū)別？

1、兩種方法各有各的優(yōu)勢。

在實(shí)際優(yōu)化工作之中，我們經(jīng)常會遇到一個頁面我們不想其被搜索引擎收錄的情況，在這種情況下，用“robots”生成新的精致抓取的協(xié)議更加便捷，一勞永逸。因為你只要在“robots”中對該頁面設(shè)置了屏蔽抓取以后，不管你的這個頁面在網(wǎng)站中出現(xiàn)了多少次，都不會被爬蟲抓取以及收錄；而如果這種情況下使用“nofollow”標(biāo)簽來進(jìn)行屏蔽的話，你會發(fā)現(xiàn)網(wǎng)站維護(hù)起來會異常麻煩，因為網(wǎng)站中的新頁面難免有的石斛需要加上該鏈接，每加一次都要另外加一次“nofollow”標(biāo)簽，一旦有一次遺漏了，就很有可能會被搜索引擎給收錄了。還有一種情況則相反，有一個頁面我們希望它正常被收錄獲得排名，但是因為有的頁面中關(guān)于此鏈接的重復(fù)鏈接太多了，會造成不好的影響，這時候就不適合用“robots”來屏蔽了，而是應(yīng)該使用“nofollow”標(biāo)簽對部分重復(fù)鏈接進(jìn)行屏蔽。

2、屏蔽的方式不同。

“nofollow”針對的是訪問路徑進(jìn)行屏蔽，擋住百度蜘蛛等爬蟲的去路，而“robots”如同一個平臺，我們在這個平臺上對網(wǎng)站中的部分頁面進(jìn)行登記過了，以后但凡遇到這個鏈接頁面，你都不要再多事了。這里需要注意的是，“robots”只針對站內(nèi)頁面有效，不能屏蔽其他網(wǎng)站的鏈接，而“nofollow”沒有這個限制，這也是“nofollow”和“robots”比較重要的一個區(qū)別。

3、“robots”除了可以屏蔽特定頁面以外還有其他一些實(shí)用功能。

“robots”不僅可以屏蔽站內(nèi)的頁面還可以反方向屏蔽特定蜘蛛及其他網(wǎng)站爬蟲程序的訪問。比如有的時候，可能你的網(wǎng)站帶寬較小，而在網(wǎng)站日志中看大某個沒有用處的蜘蛛頻繁性地訪問你的網(wǎng)站，從而讓服務(wù)器過于擁擠以至崩潰，這時就可以利用“robots”限制其訪問權(quán)限。除了可以限制爬蟲的訪問權(quán)限以外，還可以在“robots”中載明sitemap地址，更有利于蜘蛛注意到sitemap并且持續(xù)抓取網(wǎng)站的新內(nèi)容以及更新的頁面。

通過““nofollow”和“robots”傻傻分不清楚？”這篇文章你是不是更加清楚的了解了“nofollow”和“robots”之間的不同呢？如果您還有什么疑問可以登錄網(wǎng)址進(jìn)行咨詢了解。歡迎您的到來！