蜘蛛陷阱指的是不利于搜索引擎蜘蛛爬行和抓取的網(wǎng)站設(shè)計(jì)技術(shù)。這些技術(shù)對(duì)搜索引擎來(lái)說(shuō)很不友好。我們行內(nèi)稱(chēng)作為蜘蛛陷阱。常見(jiàn)的蜘蛛陷阱分為下面幾種。

1、Flash

網(wǎng)站上某個(gè)小部分使用flash增強(qiáng)視覺(jué)效果是沒(méi)有問(wèn)題的，因?yàn)檫@只是眾多html代碼中的一小部分，不會(huì)影響搜索引擎正常的文字抓取。但如果整個(gè)網(wǎng)站頁(yè)面就是一個(gè)大的flash文件，就會(huì)造成蜘蛛陷阱。這樣的頁(yè)面看起來(lái)精美結(jié)論，但是對(duì)于搜索引擎來(lái)說(shuō)，它們什么都沒(méi)有，是空的；搜索引擎并不能在這個(gè)頁(yè)面中索引出任何文字信息。

2、Session ID

某些網(wǎng)站使用Session ID（會(huì)話(huà)ID）跟蹤訪問(wèn)用戶(hù)，這會(huì)使每個(gè)用戶(hù)來(lái)訪問(wèn)網(wǎng)站都會(huì)生成一個(gè)Session ID加在url中。搜索引擎蜘蛛也不例外，每次訪問(wèn)也會(huì)被當(dāng)作新用戶(hù)一樣生成一個(gè)Session ID，所以搜索引擎蜘蛛每次來(lái)訪問(wèn)同一個(gè)頁(yè)面的時(shí)候url卻不一樣，造成了大量的復(fù)制內(nèi)容。這也是常見(jiàn)的蜘蛛陷阱之一，不利于網(wǎng)站整站營(yíng)銷(xiāo)。

3、跳轉(zhuǎn)

記住，除了301跳轉(zhuǎn)是搜索引擎所推薦的，其他所有的跳轉(zhuǎn)方式，不管是302跳轉(zhuǎn)、Js跳轉(zhuǎn)還是Flash跳轉(zhuǎn)等等都對(duì)蜘蛛爬行不利。所以不到情非得已，千萬(wàn)不要使用301跳轉(zhuǎn)之外的跳轉(zhuǎn)，很容易進(jìn)入蜘蛛陷阱。

4、框架結(jié)構(gòu)

框架結(jié)構(gòu)在網(wǎng)站誕生初期的時(shí)候是很流行的，用起來(lái)非常的方便，不過(guò)現(xiàn)在很少有人用框架了，畢竟它不利于搜索引擎抓取。如果你不知道什么是框架結(jié)構(gòu)，那么恭喜你成功的避免了這個(gè)蜘蛛陷阱。你也可以忘了這件事，不要浪費(fèi)時(shí)間去研究什么是框架結(jié)構(gòu)。

5、動(dòng)態(tài)url

動(dòng)態(tài)url指的是帶有問(wèn)號(hào)、等號(hào)等參數(shù)的url，動(dòng)態(tài)的url不利于搜索引擎蜘蛛抓取，會(huì)造成蜘蛛陷阱。不過(guò)這是以前的搜索引擎了，現(xiàn)在的搜索引擎對(duì)于抓取動(dòng)態(tài)url沒(méi)有太大的問(wèn)題，但是我們還是盡量避免網(wǎng)站產(chǎn)生大量的動(dòng)態(tài)url。

6、Js鏈接

Js（java sceipt）可以制造出很多精美的視覺(jué)效果，對(duì)于用戶(hù)欣賞網(wǎng)站有著很好的體驗(yàn)，不過(guò)js跟flash一樣，小部分使用沒(méi)有問(wèn)題，整個(gè)頁(yè)面都是js就會(huì)使得搜索引擎無(wú)內(nèi)容可抓取。導(dǎo)致蜘蛛陷阱。

7、要求登錄

某些網(wǎng)站需要用戶(hù)登錄才能查看網(wǎng)站內(nèi)容。但是搜索引擎是不會(huì)注冊(cè)，不會(huì)填寫(xiě)用戶(hù)名以及密碼的，所以這部分內(nèi)容搜索引擎也看不到。這也是常見(jiàn)的蜘蛛陷阱之一。

8、強(qiáng)制用戶(hù)使用cookies

某些網(wǎng)站為了記住用戶(hù)的登入信息、或者用戶(hù)訪問(wèn)路徑等，強(qiáng)制用戶(hù)使用cookies。但強(qiáng)制使用cookies會(huì)造成搜索引擎蜘蛛無(wú)法正常訪問(wèn)。