在我們優(yōu)化的過(guò)程中，有一些網(wǎng)站設計技術(shù)對搜索引擎來(lái)說(shuō)是很不友好，不利于蜘蛛爬行和抓取，這些技術(shù)被稱(chēng)為蜘蛛陷阱。下面給大家介紹以下幾種常見(jiàn)的蜘蛛陷阱，大家在工作中一定要全力避免。

一、flash

1、在網(wǎng)頁(yè)的某一小部分使用flash增強視覺(jué)效果是很正常的，比如用flash做成的廣告、圖標等。這種小flash和圖片是一樣的，只是html代碼中的很小一部分，頁(yè)面上還有其他以文字為主的內容，所以對搜索引擎抓取和收錄沒(méi)有影響。

2、但是有的網(wǎng)站整個(gè)首頁(yè)就是一個(gè)大的flash文件，這就構成了蜘蛛陷阱。搜索引擎抓取的html代碼只有一個(gè)連向flash文件的鏈接，沒(méi)有其他文字內容。搜索引擎是無(wú)法讀取flsh文件中的文字和鏈接的。

3、整個(gè)網(wǎng)站就是一個(gè)大的flash文件，從seo的角度來(lái)說(shuō)是萬(wàn)萬(wàn)不可的。如果flash是必須要加，建議在首頁(yè)加上一個(gè)通往html版本的鏈接。這個(gè)鏈接應該是在flash文件之外的html代碼中，搜索引擎跟蹤這個(gè)鏈接可以抓取后面的html版本頁(yè)面。

二、各種跳轉

1、除了后面會(huì )介紹的301轉向以外，搜索引擎對其他形式的跳轉都比較敏感，如:302，js，等跳轉。

2、有些網(wǎng)站用戶(hù)訪(fǎng)問(wèn)首頁(yè)時(shí)會(huì )被自動(dòng)轉向到某個(gè)目錄下的頁(yè)面。如果是按用戶(hù)地理位置轉向至最適合的目錄，那倒情有可原。但大部分這種首頁(yè)轉向看不出任何理由和目的，這樣的轉向能避免則避免。

3、如果必須轉向，301轉向是搜索推薦的、用戶(hù)網(wǎng)址更改的轉向，可以把頁(yè)面權重從舊網(wǎng)址轉移到新網(wǎng)址。其他轉向方式是都對蜘蛛爬行不利的。

三、框架結構

1、如果作為站長(cháng)的你不知道什么是框架結構，那么恭喜你，你已經(jīng)避免了這個(gè)蜘蛛陷阱，根本沒(méi)必要知道什么是框架結構。如果你在網(wǎng)站設計中還在使用框架結構，我的建議是取消。

2、使用框架結構設計頁(yè)面，在網(wǎng)站誕生初期曾經(jīng)挺流行的，因為對網(wǎng)站的頁(yè)面更新維護有一定方便性。不過(guò)現在的網(wǎng)站已經(jīng)很少使用框架了，不利于搜索引擎抓取是框架越來(lái)越不流行的重要原因之一，對搜索引擎來(lái)說(shuō)，訪(fǎng)問(wèn)一個(gè)使用框架的網(wǎng)址所抓取的html文件只包含調用其他html文件的代碼，并不包含文字信息，搜索引擎根本無(wú)法判斷這個(gè)網(wǎng)址的內容是什么。

四、動(dòng)態(tài)url

動(dòng)態(tài)url指的是數據庫驅動(dòng)的網(wǎng)站所生成的、帶有問(wèn)號、等號及參數的網(wǎng)址。一般來(lái)說(shuō)動(dòng)態(tài)url不利于搜索引擎蜘蛛爬行，應該盡量避免。

五、js鏈接

由于js可以創(chuàng )造出很多吸引人的視覺(jué)效果，有些網(wǎng)站喜歡使用js腳本生成導航系統。這也是比較嚴重的蜘蛛陷阱之一

六、要求登錄

有些網(wǎng)站內容放在需要用戶(hù)登錄之后才能看到的會(huì )員區域，這部分內容搜索引擎無(wú)法看到。蜘蛛不能填寫(xiě)用戶(hù)名、密碼，也不會(huì )注冊。

七、強制使用cookies

有些網(wǎng)站為了實(shí)現某種功能，如記住用戶(hù)登錄信息、跟蹤用戶(hù)訪(fǎng)問(wèn)路徑等，強制用戶(hù)使用cookies，用戶(hù)瀏覽器如果沒(méi)有啟用cookies，頁(yè)面顯示不正常。搜索引擎蜘蛛就相當于一個(gè)禁用cookies的瀏覽器，強制使用cookies只能造成搜索引擎蜘蛛無(wú)法正常訪(fǎng)問(wèn)。