所謂蜘蛛陷阱,是阻止搜索引擎蜘蛛程序爬行網站的障礙陷阱。這些障礙將阻止蜘蛛爬行網頁,從而阻止了網站上網頁的收錄。下面,筆者整理了一些徹底屏蔽蜘蛛陷阱需要制止的幾個行為,列出來供各位以作參考,大家有則改之無則加勉。
第一、在制作帶有注冊登錄頁面的網站的時候,不要帶有強制注冊和登錄才能瀏覽網頁的功能,要讓任何人都能正常瀏覽網頁,只有用戶希望登錄的時候,才顯示登錄和注冊功能,讓用戶自主選擇。 第二、不在網頁上使用Flash技術,可以采用某些js代碼來替代Flash的功能。 第三、不再網頁上實現任何網頁跳轉功能,如有必要,可以采用301永久重定向來實現“跳轉”功能,301是對搜索引擎最為友好的一種網頁轉向技術。 第四、盡量不要使用動態URL,避免因為參數失誤造成網頁打開錯誤或者無法打開。 第五、不要在網頁上使用iframe框架技術,避免出現這種對搜索引擎不友好的行為,使得網頁代碼對搜索引擎更友好。 第六、網頁上的導航系統不要采用js代碼來實現,可以采用div+css的技術,里面填充純文字和A標簽的方式,這樣的寫法是搜索引擎感興趣的,js代碼實現的導航對于搜索引擎來說很不感冒。 第七、不要采用過于復雜的網站結構,不要使用超過三層的目錄結構,也不要將網頁上的內容放置的過于多了,這樣便于搜索引擎的爬行和抓取。 第八、如沒有必要,或者有其他替代手段,盡量不要讓網頁的瀏覽受制于Cookies,讓任何人都能夠正常瀏覽網頁是必須的。 以上就是關于徹底屏蔽蜘蛛陷阱需要制止的幾個行為。其實,只要是有礙于蜘蛛爬行和抓取的障礙,都可以認為是蜘蛛陷阱,都不應該出現在網站上。筆者提醒您:為了網站的正常發展,我們必須采用正規的手法制作網站,避免采用“黑帽”手段,做網站投機取巧是無法做出好的網站的,只有規規矩矩做網站才是正途。 |