Windows7（32位）安裝爬蟲利器Scrapy小結(jié)

安裝環(huán)境說明

我家中筆記本的環(huán)境非常簡單：

創(chuàng)新互聯(lián)公司主營天涯網(wǎng)站建設(shè)的網(wǎng)絡(luò)公司,主營網(wǎng)站建設(shè)方案,重慶App定制開發(fā),天涯h5成都小程序開發(fā)搭建,天涯網(wǎng)站營銷推廣歡迎天涯等地區(qū)企業(yè)咨詢

• Windows 7旗艦版32位（非SP1）
• Python 3.4.4（非SP1的WIN7下無法安裝版本3.5+）

  Scrapy安裝

  Scrapy重度依賴于lxml和twisted兩個框架。這也正是問題所在。開源環(huán)境下工具的安裝往往需要我們事先確定要安裝的工具庫依賴于哪些第三方庫及其相關(guān)的依賴。如果有一個依賴安裝要求滿足不了，則安裝失敗。因此，安裝前要做好必要的調(diào)查分析。

  試驗(yàn)安裝Scrapy失敗

  最開始時，我在DOS命令行下使用如下命令安裝，但是失敗了：
  pip install scrapy

運(yùn)行上述命令時，pip會默認(rèn)從https://files.pythonhosted.org網(wǎng)站上下載并安裝最新版本的scrapy庫，當(dāng)然它會自動分析當(dāng)前系統(tǒng)中已經(jīng)安裝的python版本。盡管如此，其所依賴的其他第三方庫并不會作嚴(yán)格檢查，結(jié)果會導(dǎo)致整個安裝僅查最后的百分之幾卻是以失敗結(jié)果而告終。

安裝lxml

絕大多數(shù)網(wǎng)站上推薦的Lxml安裝思路是從Python第三方庫的網(wǎng)站http://www.lfd.uci.edu/~gohlke/pythonlibs/上下載編譯好的.whl壓縮文件，如下圖：

但是，很遺憾，當(dāng)我現(xiàn)在跳轉(zhuǎn)到此網(wǎng)站找Python 3.4對應(yīng)版本的.WHL文件時，早已不存在了。但是，以它提供的合適的文件作參考lxml-3.7.3-cp34-cp34m-win32.whl，我再次從網(wǎng)絡(luò)上搜索，最終從開源網(wǎng)站github（https://github.com/Lucterios2/core/blob/master/packages/lxml-3.4.4-cp34-none-win32.whl）上找到一個文件lxml-3.4.4-cp34-none-win32.whl。

下載沒有問題，安裝前需要先安裝wheel，也很容易，最后安裝成功！

twisted不需要單獨(dú)專門安裝

成功安裝Scrapy

值得慶幸的是，Scrapy當(dāng)前最新版本也正是1.7.3，我從網(wǎng)絡(luò)上搜索到的文件名是Scrapy-1.7.3-py2.py3-none-any.whl。

下載地址也很經(jīng)典，是https://pypi.org/project/Scrapy/#files

下載容易，安裝也非常簡單，成功安裝！
而沒有直接使用命令pip install scrapy安裝。

小結(jié)

安裝過程中經(jīng)歷的挫折很多很多，盡管沒有細(xì)述，但是經(jīng)驗(yàn)卻已經(jīng)寫了最前面。希望有興趣的讀者在行動前先要做到心中有數(shù)，而不是盲目地跟著某些文章中介紹的那樣上來就直接安裝，這樣的話，很可能會導(dǎo)致安裝了一些半成品——甚至算是垃圾，給自己的清理后的重新安裝都帶來很多麻煩！

另外有需要云服務(wù)器可以了解下創(chuàng)新互聯(lián)cdcxhl.cn，海內(nèi)外云服務(wù)器15元起步，三天無理由+7*72小時售后在線，公司持有idc許可證，提供“云服務(wù)器、裸金屬服務(wù)器、高防服務(wù)器、香港服務(wù)器、美國服務(wù)器、虛擬主機(jī)、免備案服務(wù)器”等云主機(jī)租用服務(wù)以及企業(yè)上云的綜合解決方案，具有“安全穩(wěn)定、簡單易用、服務(wù)可用性高、性價比高”等特點(diǎn)與優(yōu)勢，專為企業(yè)上云打造定制，能夠滿足用戶豐富、多元化的應(yīng)用場景需求。

分享標(biāo)題：Windows7（32位）安裝爬蟲利器Scrapy小結(jié)-創(chuàng)新互聯(lián)
瀏覽路徑：http://chinadenli.net/article14/cohsde.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供微信公眾號、App開發(fā)、關(guān)鍵詞優(yōu)化、微信小程序、服務(wù)器托管、建站公司

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請盡快告知，我們將會在第一時間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時需注明來源： 創(chuàng)新互聯(lián)