由于安装scrapy框架需要依赖很多其他的库,所以要先安装这些依赖库才能正常安装scrapy框架,这里简单记录一下安装scrapy框架的过程:
windows下安装
- 1、 首先需要安装依赖库,需要的依赖库有:lxml,pyOpenSLL,twisted,pywin32,可以直接用pip安装,如
pip install lxml
,pip install pyOpenSLL
,'pip install pywin32'等,但我用pip install twisted
的时候是无法直接安装的,会报Failed building wheel for twisted
这个错,当出现这个错的时候就不能直接用pip安装,要先到https://www.lfd.uci.edu/~gohlke/pythonlibs/搜索下载对应的 whl文件,然后用pip install 文件路径
,例如:先下载twisted,然后我在命令行输入pip install D:\软件安装包\Twisted-18.7.0-cp36-cp36m-win_amd64.whl
,回车执行,这样就能正常安装twisted - 2、 安装好上面的依赖库后,然后就可以直接scrapy框架了,命令输入:
pip install scrapy
回车执行即可 - 3、 这个备用:python各种库(whl格式)下载地址:
http://www.lfd.uci.edu/~gohlke/pythonlibs/
https://pypi.python.org/pypi?%3Aaction=index