蜘蛛陷阱是對搜索引擎來說的,盡管有些網(wǎng)站看上去高大上,很酷,但這可能會給搜索蜘蛛設(shè)置了大量的障礙,也就是
今天給大家說的蜘蛛陷阱。
我們看看百度百科對蜘蛛陷阱的定義:“蜘蛛陷阱”是阻止蜘蛛程序爬行網(wǎng)站的障礙物,通常是那些顯示網(wǎng)頁的技術(shù)方
法,很多瀏覽器在設(shè)計(jì)的時候考慮過這些因素,所以可能網(wǎng)頁界面看起來非常正常,但這些蜘蛛陷阱會對蜘蛛程序造成
障礙,如果消除這些蜘蛛陷阱,可以使蜘蛛程序收錄更多的網(wǎng)頁。
設(shè)想一下如果你去一個地方用百度地圖導(dǎo)航,結(jié)果地圖把你帶入一條荒無人煙的臭水溝里,你會怎么想。其實(shí)搜索引擎
蜘蛛和人一樣,如果讓蜘蛛掉進(jìn)了你設(shè)置的陷阱里,那么:蜘蛛很生氣,后果很嚴(yán)重了!
一旦把蜘蛛惹急了,不是對你的網(wǎng)站進(jìn)行降權(quán)就是K站,所以說蜘蛛大哥也不是好惹的。我們做SEO的還要心存敬畏之心
。

成都創(chuàng)新互聯(lián)公司是專業(yè)的長豐網(wǎng)站建設(shè)公司,長豐接單;提供成都網(wǎng)站設(shè)計(jì)、
成都網(wǎng)站建設(shè),網(wǎng)頁設(shè)計(jì),網(wǎng)站設(shè)計(jì),建網(wǎng)站,PHP網(wǎng)站建設(shè)等專業(yè)做網(wǎng)站服務(wù);采用PHP框架,可快速的進(jìn)行長豐網(wǎng)站開發(fā)網(wǎng)頁制作和功能擴(kuò)展;專業(yè)做搜索引擎喜愛的網(wǎng)站,專業(yè)的做網(wǎng)站團(tuán)隊(duì),希望更多企業(yè)前來合作!
那么哪些是蜘蛛陷阱,如何預(yù)防?
1、各種跳轉(zhuǎn)
常見的網(wǎng)站跳轉(zhuǎn)方法例如:JS跳轉(zhuǎn)、Flash跳轉(zhuǎn)、302跳轉(zhuǎn)等,除301跳轉(zhuǎn)除外,因?yàn)樗撬阉饕嫱扑]和認(rèn)可的跳轉(zhuǎn)形式,它主要用在網(wǎng)站域名更改,利用301跳轉(zhuǎn)將老域名的權(quán)重全部繼承給新域名。除了301轉(zhuǎn)向很多的占用其他轉(zhuǎn)向欺騙用戶和搜索引擎,也是heimao的一種手段,所以建議大家不要使用,以免網(wǎng)站被K。除301之外的各種跳轉(zhuǎn)對搜索引擎來說都是不利的,不利于蜘蛛的爬取,給蜘蛛制造了所謂的陷阱。
2、復(fù)雜的框架結(jié)構(gòu)
框架結(jié)構(gòu)就目前來說算的上是
網(wǎng)站建設(shè)界的老話題了,現(xiàn)如今
建站愈來愈簡單智能的時代,框架結(jié)構(gòu)逐漸落伍并且非常不利于蜘蛛爬取網(wǎng)站的內(nèi)容,所以框架結(jié)構(gòu)是被逼成了蜘蛛陷阱,老實(shí)講這不能怪它,可是也不得不怪它,這同時也驗(yàn)證了一句話:落后就要挨打。
3、動態(tài)URL
我們知道,搜索引擎比較喜歡靜態(tài)網(wǎng)址,所以很多的動態(tài)網(wǎng)站都會使用偽靜態(tài)設(shè)置。動態(tài)URL通俗的解釋就是網(wǎng)站鏈接中帶有各種參數(shù)、等號、問號或者其它符號而長度還很長的鏈接,恰巧的是蜘蛛也喜歡這種鏈接,其實(shí)最根本的原因還是動態(tài)URL不利于蜘蛛的爬取。
4、JS腳本
對于這一點(diǎn)可能存在一定的爭議。JS在網(wǎng)站建設(shè)中又離不開
,因?yàn)樗転榫W(wǎng)站實(shí)現(xiàn)很多功能和特效,但是它不利于蜘蛛爬取內(nèi)容,不過它也可以用在網(wǎng)站的其他方面對咱們做SEO的還是有所幫助的,比如為了避免網(wǎng)站權(quán)重的分散,我們就可以用JS腳本阻止蜘蛛對該頁面的抓取,而就這一點(diǎn)來說它又是網(wǎng)站SEO的好工具,所以對于JS腳本這一點(diǎn)還是自己掌握分寸吧!
5、頁面是frame框架結(jié)構(gòu)
網(wǎng)站使用的frame框架結(jié)構(gòu),這種結(jié)構(gòu)雖然代碼精簡,而且很方便更新維護(hù)網(wǎng)站,但是,這種結(jié)構(gòu)蜘蛛基本上抓不到這里面的內(nèi)容,特別是里面有那些重要內(nèi)容的時候,那更是對優(yōu)化很不利的。
6、必須要登陸才能訪問
有些企業(yè)站和個人站的設(shè)置一定要注冊登錄后才能看到相關(guān)的文章內(nèi)容。這是絕對不可取的,這相當(dāng)于把蜘蛛關(guān)在大門外了,畢竟搜索引擎蜘蛛不是人,沒有那么智能,他不會自動填寫用戶名、密碼、驗(yàn)證碼,這種情況的頁面設(shè)置要特別是注意。嚴(yán)重的時候,蜘蛛不會光顧你的網(wǎng)站。
7、robots.txt書寫錯誤
robots文件是蜘蛛訪問網(wǎng)站的第一個文件,這個文件告訴蜘蛛那些是可以抓取的,那些是不能抓的,robots文件編寫會有一定的格式要求,如果編寫錯誤,也會禁止蜘蛛訪問和抓取。
8、Flash
Flash基本上被淘汰了,但有的網(wǎng)站頁面使用Flash視覺效果是很正常的,比如用Flash做的Logo、廣告、圖表等,這些對搜索引擎抓取和收錄是沒有問題的,很多網(wǎng)站的首頁是一個大的Flash文件,這種就叫蜘蛛陷阱,我們知道蜘蛛喜歡的是文字,雖然大的Flash效果看上去很漂亮,但搜索引擎無法讀取任何內(nèi)容,所以不提倡這種Flash做首頁圖片。
9、url層級太深
有的網(wǎng)頁沒有入口,而且距離網(wǎng)站的首頁又很遠(yuǎn),這種頁面就相對較難被蜘蛛爬行到,嚴(yán)格意義上來說這不屬于陷阱,但我們拿來說一下吧,畢竟也影響蜘蛛的抓取。內(nèi)頁和首頁的點(diǎn)擊距離越近,越容易得到更多的首頁權(quán)重傳遞。良好的網(wǎng)站結(jié)構(gòu)可以讓網(wǎng)站更多的頁面被收錄。
10、強(qiáng)制使用cookies,
對于搜索引擎來說是相當(dāng)于直接禁用了cookies的,而有些網(wǎng)站為了實(shí)現(xiàn)某些功能會采取強(qiáng)制cookies,比如說跟蹤用戶訪問路徑,記住用戶信息,甚至是盜取用戶隱私等,如果用戶在訪問這類站點(diǎn)時沒有啟用cookies,所顯示的頁面就會不正常,所以對于蜘蛛來講同樣的網(wǎng)頁無法正常訪問。
和各種各樣的作弊手法,比如說隱藏文字,隱藏鏈接等,采用偽裝網(wǎng)頁在判斷來訪者是蜘蛛還
是普通瀏覽器者而顯示不同的網(wǎng)頁,使用默認(rèn)錯誤的404頁面等,同樣會給蜘蛛帶來爬行障礙。
綜上所述,是小編對蜘蛛陷阱的總結(jié),可能不僅全面,之后隨著網(wǎng)絡(luò)技術(shù)的發(fā)展,還會出現(xiàn)其他的蜘蛛陷阱,對于站長來說蜘蛛就是我們的朋友,要善待它,他會給我們好的回報(bào),如果我們虐待他,那么我們的網(wǎng)站優(yōu)化之路就注定坎坷。
防范蜘蛛陷阱是網(wǎng)絡(luò)優(yōu)化之必要條件。
文章名稱:蜘蛛陷阱是什么,網(wǎng)站SEO如何避免蜘蛛陷阱
URL分享:http://chinadenli.net/article44/sojjee.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供網(wǎng)站制作、網(wǎng)站維護(hù)、搜索引擎優(yōu)化、全網(wǎng)營銷推廣、響應(yīng)式網(wǎng)站、網(wǎng)站建設(shè)
廣告
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源:
創(chuàng)新互聯(lián)