那些容易被忽略的蜘蛛陷阱
摘要:那些容易被忽略的蜘蛛陷阱,常見蜘蛛陷阱有哪些,對搜索引擎來說,網站建設中有很多細節要求,為了避免站長建站的時候掉進蜘蛛陷阱,合肥網站建設跟大家分享都有哪些蜘蛛陷阱。
對搜索引擎來說,網站建設中有很多細節要求,為了避免站長建站的時候掉進蜘蛛陷阱,
合肥網站建設跟大家分享都有
哪些蜘蛛陷阱。
總的來說蜘蛛陷阱有一下幾種情況,
動態URL,Flash動畫,JS鏈接,Frame框架,各種跳轉,不合理的鏈接結構,我們了解比較多的也就這些,下面簡單來介紹一下。
一,動態的URL
我們都知道URL鏈接蜘蛛是可以抓取的,動態URL都是在數據庫中直接生成的,URL中有很多中文標點符號,比如等號問號等,這樣的網址是不利于蜘蛛抓取的,還有可能會造成死循環,這就是一個蜘蛛陷阱,所以建議大家只用靜態URL,利于網站建設和優化。
二,Flash動畫
Flash動畫也是我們常見的,之所以把它說成陷阱,是因為蜘蛛識別不了Flash。我們見過的很多網站首頁都是一個大的Flash動畫,然后再進入到內頁,這對用戶來說沒什么影響,而對蜘蛛來說就困難了,Flash阻礙了蜘蛛抓取內頁。如果一定要使用Flash動畫,最好有鏈接通向內頁。
三,JS鏈接
程序員都應該知道,JS可以給人的視覺帶來一定的效果,還會用JS腳本生成導航系統,這樣做也是不對的,蜘蛛也不認識JS。如果將需要被爬行的鏈接一同放進JS中,蜘蛛就無法抓取,只要將不需要被爬行的鏈接放進
JS效果中就可以了,還要避免使用太多JS特效。
四,Frame框架
Frame框架也是阻礙蜘蛛爬行的一道坎,和前面說的Flash和JS都是一樣的,所以在網站建設和優化中是不可取的。
五,網站跳轉
我們見過很多種跳轉,301重定向的我們最常見的,301和302跳轉是最合理的跳轉,蜘蛛對他們并不反感,而其他跳轉就不可以了。黑帽多是使用跳轉去黑別人的網站,其他JS跳轉和代碼跳轉最好不要使用。這里要說明的一點就是404頁面一定要使用代碼跳轉,時間不能超過5秒。