看了看相关介绍后选择了Scrapy框架,然后兴高采烈的打开了控制台,

pip install Scrapy


想当然能安装成功,其实是不行的。

坑1:

64位win10 python3.5环境安装scrapy_ci


先装
parsel, w3lib, cryptography, pyOpenSSL这些可以直接使用pip命令安装。如:

pip install parsel

再安装pip install wheel
之后需要的WHL文件要去这里找:


​http://www.lfd.uci.edu/~gohlke/pythonlibs/​

最重要是下面两个


 


pip install lxml-3.7.3-cp35-cp35m-win_amd64.whl


pip install Twisted-17.1.0-cp35-cp35m-win_amd64.whl


最后
pip install Scrapy

64位win10 python3.5环境安装scrapy_python_02

世界终于清静了。