windows10系統(tǒng)中安裝python3.x+scrapy教程
官網(wǎng)下載就好， https://www.python.org/downloads/release/python-352/
用installer下載比較方便，它直接把環(huán)境變量都幫你配了。
當(dāng)然也可以在本站下載 http://www.dbjr.com.cn/softs/416037.html
升級pip
安裝好之后在cmd里執(zhí)行
python -m pip install -upgrade pip
把pip提到最新版本
下載lxml
lxml是解析網(wǎng)頁用的，scrapy依賴于它，它是一個第三方的庫，這里推薦一個python第三方庫的網(wǎng)站
http://www.lfd.uci.edu/~gohlke/pythonlibs/ ，里邊都是編譯好的，windows下python使用者的福利。
Ctrl+F定位一下lxml
注意：打開網(wǎng)址后ctrl+F，搜索LXML，選擇對應(yīng)版本，一般是win32，而不選win_arm64，即使電腦是win64
下載好之后，cmd進(jìn)入下載目錄，直接用pip安裝
pip install lxml-3.6.4-cp35-cp35m-win_32.whl
安裝scrapy
pip安裝最方便
pip install scrapy
查看版本
scrapy version
輸出應(yīng)該是Scrapy 1.2.1，也是官網(wǎng)的最新版本。
可能遇到的問題
以下內(nèi)容匯總了csdn和stackoverflow部分內(nèi)容
1．Python error: Unable to find vcvarsall.bat
安裝MinGW（實測）
1、下載安裝MinGW，下載地址為：點(diǎn)擊打開鏈接
2、在MinGW的安裝目錄下找到bin文件夾，找到mingw32-make.exe，復(fù)制一份更名為make.exe
3、把MinGW的路徑添加到環(huán)境變量path中，比如我把MinGW安裝到D:\MinGW\中，就把D:\MinGW\bin添加到path中；
4、在<python安裝目錄>\distutils(需要在python安裝目錄下ctrl+f一下distutils)增加文件distutils.cfg，在文件里輸入
[build] compiler=mingw32
保存；
2、error: command‘gcc'failed: No such file or directory
解決方案是將D:\MinGW\lib再添加到PATH中。
3、ValueError: Unknown MS Compiler version 1900
Cygwinccompiler.py中
get_msvcr()函數(shù)
在
elif msc_ver == '1600': # VS2010 / MSVC 10.0 return ['msvcr100']
后面，添加以下內(nèi)容
elif msc_ver == '1700': # Visual Studio 2012 / Visual C++ 11.0 return ['msvcr110'] elif msc_ver == '1800': # Visual Studio 2013 / Visual C++ 12.0 return ['msvcr120'] elif msc_ver == '1900': # Visual Studio 2015 / Visual C++ 14.0 # "msvcr140.dll no longer exists" http://blogs.msdn.com/b/vcblog/archive/2014/06/03/visual-studio-14-ctp.aspx return ['vcruntime140']
然后將python3.5文件夾下的vcruntime140.dll復(fù)制到D:\MinGW\mingw32\lib下
4、TypeError: unorderable types: NoneType() >= str()
重啟一下試試
5、error: The 'pyasn1' distribution was not found and is required by service-identity
在運(yùn)行一下setup.py試試
以上就是本文的全部內(nèi)容了，希望對大家學(xué)習(xí)python能夠有所幫助。
- 在python3.9下如何安裝scrapy的方法
- Python3環(huán)境安裝Scrapy爬蟲框架過程及常見錯誤
- 圖文詳解python安裝Scrapy框架步驟
- 詳解Python網(wǎng)絡(luò)框架Django和Scrapy安裝指南
- 詳解Python安裝scrapy的正確姿勢
- mac下給python3安裝requests庫和scrapy庫的實例
- Python之Scrapy爬蟲框架安裝及簡單使用詳解
- Python2.7下安裝Scrapy框架步驟教程
- Python3安裝Scrapy的方法步驟
- python安裝Scrapy圖文教程
- python中安裝Scrapy模塊依賴包匯總
- 在Linux系統(tǒng)上安裝Python的Scrapy框架的教程
- Python安裝Scrapy庫的常見報錯解決
相關(guān)文章
今天給大家分享一個讀者粉絲投稿的，關(guān)于上課點(diǎn)名的實戰(zhàn)案例，對Python上課點(diǎn)名器實現(xiàn)過程感興趣的朋友，一起來看看是如何實現(xiàn)的吧2021-09-09
這篇文章主要介紹了基于python3實現(xiàn)倒敘字符串,文中通過示例代碼介紹的非常詳細(xì)，對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友可以參考下2020-02-02
這篇文章主要介紹了使用Python解析Chrome瀏覽器書簽的示例，幫助大家更好的理解和使用python，感興趣的朋友可以了解下2020-11-11
python 解析XML python模塊xml.dom解析xml實例代碼
這篇文章主要介紹了分享下python中使用模塊xml.dom解析xml文件的實例代碼，學(xué)習(xí)下python解析xml文件的方法，有需要的朋友參考下2014-02-02
Python運(yùn)維自動化之paramiko模塊應(yīng)用實例
paramiko是一個基于SSH用于連接遠(yuǎn)程服務(wù)器并執(zhí)行相關(guān)操作,使用該模塊可以對遠(yuǎn)程服務(wù)器進(jìn)行命令或文件操作,這篇文章主要給大家介紹了關(guān)于Python運(yùn)維自動化之paramiko模塊應(yīng)用的相關(guān)資料,需要的朋友可以參考下2022-09-09
Python內(nèi)置數(shù)據(jù)結(jié)構(gòu)列表與元組示例詳解
這篇文章主要給大家介紹了關(guān)于Python內(nèi)置數(shù)據(jù)結(jié)構(gòu)列表與元組的相關(guān)資料,列表是順序存儲的數(shù)據(jù)結(jié)構(gòu),類似于數(shù)據(jù)結(jié)構(gòu)中的順序表,在存儲上是相連的一大塊內(nèi)存空間,在物理和邏輯上都是連續(xù)的,需要的朋友可以參考下2021-08-08
這篇文章主要介紹了Python繪圖中解決Turtle的安裝問題示例分析，也遇到過相同問題的同學(xué)可以借鑒參考下，希望能夠解決你的問題2021-10-10
Python標(biāo)準(zhǔn)模塊中，有多個模塊用于數(shù)據(jù)的壓縮與解壓縮，如zipfile，gzip, bz2等等。這篇文章主要給大家介紹了python如何利用模塊zlib壓縮與解壓字符串和文件的方法，有需要的朋友們可以參考借鑒，下面來一起看看吧。2016-12-12
詳解如何用django實現(xiàn)redirect的幾種方法總結(jié)
這篇文章主要介紹了如何用django實現(xiàn)redirect的幾種方法總結(jié)，詳細(xì)的介紹3種實現(xiàn)方式，對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值，需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2018-11-11
這篇文章主要給大家分享的是python turtle繪圖命令及案例，繪圖有很多命令，可以劃分為三種：畫筆運(yùn)動命令、畫筆控制命令、全局控制命令，下面來看看文章的詳細(xì)內(nèi)容吧,需要的朋友可以參考一下2021-11-11