“蜘蛛陷阱”是什么？它是阻止蜘蛛爬行網站的障礙物，并且這些蜘蛛陷阱會對蜘蛛程序造成障礙，如果消除這些陷阱，可以使蜘蛛程序收錄更多的收錄您網站的網頁。誰都不能保證說讓搜索引擎100%收錄你網站的所有網頁，但通過長期的努力，我們可以做的更好。只有最大限度的避免這些蜘蛛陷阱，才能讓搜索引擎收錄您更多的網頁。
1、登陸要求。有些企業站和個人站的設置一定要注冊登陸后才能看到相關的文章內容，這種對搜索引擎蜘蛛不是很友好，搜索引擎蜘蛛不會注冊、也不會登陸。
2、動態URL。什么叫動態URL？簡單的說就是帶有問號、等號等參數的網址就是動態URL，動態URL不利于搜索引擎蜘蛛的爬行和抓取。
3、強制使用Cookies。有些網站為了讓用戶記住登錄信息，強迫用戶使用Cookies。如果未開啟，則無法進行訪問，訪問頁面顯示的也不會正常，這種方式同時也會導致讓蜘蛛無法進行訪問。
4、框架結構。框架結構對搜索引擎來說是一個很大的問題，因為大多數的搜索引擎都無法識別網站框架，并且有些瀏覽器對框架結構頁面也不支持。
5、各種跳轉。對搜索引擎來說只對301跳轉相對來說比較友好，對其他形式的跳轉都是比較敏感，例如：JavaScript跳轉、MetaRefresh跳轉、Flash跳轉、302跳轉等等，這些都不推薦使用，因為很多的占用其他轉向欺騙用戶和搜索引擎，也是黑帽SEO的一種手段，很容易被搜索引擎懲罰。
6、Flash。有的網站頁面使用Flash視覺效果是很正常的，比如用Flash做的Logo、廣告、圖表等，這些對搜索引擎抓取和收錄是沒有問題的，但如果你網站的首頁是一個大大的Flash文件，雖然看上去很漂亮，但最終搜索引擎蜘蛛無法識別這些內容。
