對于很多做網(wǎng)站的新手來說,都沒有經(jīng)過系統(tǒng)地授課進(jìn)行網(wǎng)絡(luò)技術(shù)和建站知識學(xué)習(xí),做網(wǎng)站都是靠自學(xué),遇到難題在論壇發(fā)帖提問,更不會懂得網(wǎng)站優(yōu)化,對于較基本操作——通過網(wǎng)站日志看蜘蛛來訪情況都不知到哪里看,怎么看。前兩天看到很多人發(fā)帖提問,回復(fù)者的答案卻比較精煉,不具體,提問者還是云里霧里的,現(xiàn)我就以自己的網(wǎng)站來系統(tǒng)地操作一次,提交給大家參考,有說錯(cuò)的地方,請批評指正。
成都創(chuàng)新互聯(lián)公司2013年至今,先為臨河等服務(wù)建站,臨河等地企業(yè),進(jìn)行企業(yè)商務(wù)咨詢服務(wù)。為臨河企業(yè)網(wǎng)站制作PC+手機(jī)+微官網(wǎng)三網(wǎng)同步一站式服務(wù)解決您的所有建站問題。
1、打開FTP登錄軟件,我用的是FlashFXP,登錄空間FTP
登錄FTP后,你會發(fā)現(xiàn)根目錄下有一個(gè)wwwlogs文件夾,(有的是weblog,注:不同的服務(wù)器空間生成的日志文件目錄名稱不一樣,僅供參考,一般文件夾中包含Log字符的就是日志文件夾)。
2、打開wwwlogs文件夾后,里面有一些以日期格式特征為文件名的.gz后綴結(jié)尾的文件,這些就是我們需要下載到本地的日志文件。
3、下載到電腦桌面后,解壓縮打開,里面是一個(gè)記事本格式的文件,打開文件,看到的是下圖這樣的代碼,我下載的是3月7日的那個(gè)文件。
4、分析代碼
上圖1是百度蜘蛛的IP地址;
2是蜘蛛來訪日期時(shí)間(2012年3月6日1時(shí)21分22秒),3月7日的日志文件記錄的是從3月6日凌晨開始,至3月7日1時(shí)11分39秒整個(gè)時(shí)間段的n多次來訪記錄);
3是百度蜘蛛baiduspider
4是我網(wǎng)站被訪問的網(wǎng)頁地址;
5是sogou 搜狗蜘蛛的來訪,同樣也能看到時(shí)間和被訪網(wǎng)頁。
如果是簡單的查看,您可以在記事本中搜索baiduspider ,如果想精確分析,可借助一些專用的分析軟件。分析下哪些時(shí)間段百度蜘蛛來的最頻繁,那么我們就在這個(gè)時(shí)間段更新我們的網(wǎng)站內(nèi)容,很容易被百度收錄的。
通過分析蜘蛛來訪紀(jì)錄,可以了解本站的大體情況,而不用再為百度不放出內(nèi)頁或者不收錄的問題而苦惱了。
蜘蛛來訪正常,可以確切的說,搜索引擎對你的站很友好的,堅(jiān)持更新自己的網(wǎng)站,會有不錯(cuò)的收錄的。
注:有些共享IP空間可能不支持日志功能,對于獨(dú)立ip虛擬主機(jī)則提供每天的日志下載,而實(shí)在沒有可以日志功能的空間可以參考使用蜘蛛爬行插件的一些方法進(jìn)行分析。
1、通過工具來查看,比如百度站長平臺可以查看蜘蛛的抓取時(shí)間、抓取頻率
2、你可以通過最直接的方法,就是查看網(wǎng)站的日志,里面有很詳細(xì)的關(guān)于網(wǎng)站的一切記錄,不管是來自哪里的蜘蛛(百度蜘蛛、搜狗蜘蛛等),可以看到蜘蛛來自哪里,抓取時(shí)間是什么時(shí)候,抓取了多少次,瀏覽過哪些地方,這是最為詳細(xì)的方法。
查看百度蜘蛛爬行記錄的方法:
第一,前往空間服務(wù)器,下載網(wǎng)站日志。
第二,打開網(wǎng)站日志文件,搜索:Baiduspider。
百度(Baidu)爬蟲名稱:Baiduspider
第三,鑒別百度蜘蛛的真?zhèn)巍?/p>
由于很多站長工具會模擬百度蜘蛛的名稱來爬抓網(wǎng)站,因此,需要我們鑒別百度蜘蛛的真?zhèn)巍?/p>
鑒別方法:
開始—運(yùn)行—輸入 cmd ,用命令nslookup +ip
只要是百度的IP段,代碼中會有出現(xiàn):name:baiduspider,如果沒有出現(xiàn),那就不說不是真的百度IP段
第四,可以通過日志工具來查看網(wǎng)站日志。例如:光年日志。
分享題目:zblog查看蜘蛛記錄 蜘蛛查詢工具
網(wǎng)站路徑:http://chinadenli.net/article6/dogceig.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供App開發(fā)、網(wǎng)站建設(shè)、外貿(mào)網(wǎng)站建設(shè)、品牌網(wǎng)站制作、網(wǎng)站制作、品牌網(wǎng)站設(shè)計(jì)
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來源: 創(chuàng)新互聯(lián)