windows10系統(tǒng)中安裝python3.x+scrapy教程
官網(wǎng)下載就好, https://www.python.org/downloads/release/python-352/
用installer下載比較方便,它直接把環(huán)境變量都幫你配了。
當(dāng)然也可以在本站下載 http://www.dbjr.com.cn/softs/416037.html
升級(jí)pip
安裝好之后在cmd里執(zhí)行
python -m pip install -upgrade pip
把pip提到最新版本
下載lxml
lxml是解析網(wǎng)頁(yè)用的,scrapy依賴于它,它是一個(gè)第三方的庫(kù),這里推薦一個(gè)python第三方庫(kù)的網(wǎng)站
http://www.lfd.uci.edu/~gohlke/pythonlibs/ ,里邊都是編譯好的,windows下python使用者的福利。
Ctrl+F定位一下lxml
注意:打開(kāi)網(wǎng)址后ctrl+F,搜索LXML,選擇對(duì)應(yīng)版本,一般是win32,而不選win_arm64,即使電腦是win64
下載好之后,cmd進(jìn)入下載目錄,直接用pip安裝
pip install lxml-3.6.4-cp35-cp35m-win_32.whl
安裝scrapy
pip安裝最方便
pip install scrapy
查看版本
scrapy version
輸出應(yīng)該是Scrapy 1.2.1,也是官網(wǎng)的最新版本。
可能遇到的問(wèn)題
以下內(nèi)容匯總了csdn和stackoverflow部分內(nèi)容
1.Python error: Unable to find vcvarsall.bat
安裝MinGW(實(shí)測(cè))
1、下載安裝MinGW,下載地址為:點(diǎn)擊打開(kāi)鏈接
2、在MinGW的安裝目錄下找到bin文件夾,找到mingw32-make.exe,復(fù)制一份更名為make.exe
3、把MinGW的路徑添加到環(huán)境變量path中,比如我把MinGW安裝到D:\MinGW\中,就把D:\MinGW\bin添加到path中;
4、在<python安裝目錄>\distutils(需要在python安裝目錄下ctrl+f一下distutils)增加文件distutils.cfg,在文件里輸入
[build] compiler=mingw32
保存;
2、error: command‘gcc'failed: No such file or directory
解決方案是將D:\MinGW\lib再添加到PATH中。
3、ValueError: Unknown MS Compiler version 1900
Cygwinccompiler.py中
get_msvcr()函數(shù)
在
elif msc_ver == '1600': # VS2010 / MSVC 10.0 return ['msvcr100']
后面,添加以下內(nèi)容
elif msc_ver == '1700': # Visual Studio 2012 / Visual C++ 11.0 return ['msvcr110'] elif msc_ver == '1800': # Visual Studio 2013 / Visual C++ 12.0 return ['msvcr120'] elif msc_ver == '1900': # Visual Studio 2015 / Visual C++ 14.0 # "msvcr140.dll no longer exists" http://blogs.msdn.com/b/vcblog/archive/2014/06/03/visual-studio-14-ctp.aspx return ['vcruntime140']
然后將python3.5文件夾下的vcruntime140.dll
復(fù)制到D:\MinGW\mingw32\lib下
4、TypeError: unorderable types: NoneType() >= str()
重啟一下試試
5、error: The 'pyasn1' distribution was not found and is required by service-identity
在運(yùn)行一下setup.py試試
以上就是本文的全部?jī)?nèi)容了,希望對(duì)大家學(xué)習(xí)python能夠有所幫助。
- 在python3.9下如何安裝scrapy的方法
- Python3環(huán)境安裝Scrapy爬蟲(chóng)框架過(guò)程及常見(jiàn)錯(cuò)誤
- 圖文詳解python安裝Scrapy框架步驟
- 詳解Python網(wǎng)絡(luò)框架Django和Scrapy安裝指南
- 詳解Python安裝scrapy的正確姿勢(shì)
- mac下給python3安裝requests庫(kù)和scrapy庫(kù)的實(shí)例
- Python之Scrapy爬蟲(chóng)框架安裝及簡(jiǎn)單使用詳解
- Python2.7下安裝Scrapy框架步驟教程
- Python3安裝Scrapy的方法步驟
- python安裝Scrapy圖文教程
- python中安裝Scrapy模塊依賴包匯總
- 在Linux系統(tǒng)上安裝Python的Scrapy框架的教程
- Python安裝Scrapy庫(kù)的常見(jiàn)報(bào)錯(cuò)解決
相關(guān)文章
一起用Python做個(gè)上課點(diǎn)名器的制作過(guò)程
今天給大家分享一個(gè)讀者粉絲投稿的,關(guān)于上課點(diǎn)名的實(shí)戰(zhàn)案例,對(duì)Python上課點(diǎn)名器實(shí)現(xiàn)過(guò)程感興趣的朋友,一起來(lái)看看是如何實(shí)現(xiàn)的吧2021-09-09python 解析XML python模塊xml.dom解析xml實(shí)例代碼
這篇文章主要介紹了分享下python中使用模塊xml.dom解析xml文件的實(shí)例代碼,學(xué)習(xí)下python解析xml文件的方法,有需要的朋友參考下2014-02-02Python運(yùn)維自動(dòng)化之paramiko模塊應(yīng)用實(shí)例
paramiko是一個(gè)基于SSH用于連接遠(yuǎn)程服務(wù)器并執(zhí)行相關(guān)操作,使用該模塊可以對(duì)遠(yuǎn)程服務(wù)器進(jìn)行命令或文件操作,這篇文章主要給大家介紹了關(guān)于Python運(yùn)維自動(dòng)化之paramiko模塊應(yīng)用的相關(guān)資料,需要的朋友可以參考下2022-09-09Python內(nèi)置數(shù)據(jù)結(jié)構(gòu)列表與元組示例詳解
這篇文章主要給大家介紹了關(guān)于Python內(nèi)置數(shù)據(jù)結(jié)構(gòu)列表與元組的相關(guān)資料,列表是順序存儲(chǔ)的數(shù)據(jù)結(jié)構(gòu),類似于數(shù)據(jù)結(jié)構(gòu)中的順序表,在存儲(chǔ)上是相連的一大塊內(nèi)存空間,在物理和邏輯上都是連續(xù)的,需要的朋友可以參考下2021-08-08Python繪圖Turtle庫(kù)的安裝問(wèn)題解決
這篇文章主要介紹了Python繪圖中解決Turtle的安裝問(wèn)題示例分析,也遇到過(guò)相同問(wèn)題的同學(xué)可以借鑒參考下,希望能夠解決你的問(wèn)題2021-10-10詳解如何用django實(shí)現(xiàn)redirect的幾種方法總結(jié)
這篇文章主要介紹了如何用django實(shí)現(xiàn)redirect的幾種方法總結(jié),詳細(xì)的介紹3種實(shí)現(xiàn)方式,對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2018-11-11