安装Scrapy的爬虫框架踩坑记录

安装Scrapy的爬虫框架中的踩坑记录

Scapy需要其他包的依赖，我们不能直接运行 pip install sccrapy 命令安装， 在安装Scrapy前，我们应该提前下载lxml和twisted这两个包

第一步，为了避免出现安装报错等问题，我们可以在这个开源网站直接下载他们的whl文件安装

https://www.lfd.uci.edu/~gohlke/pythonlibs/

如果还不明白安装过程的可以参考一下我上一篇文章

第二步,安装scrapy

 pip install scrapy -i https://pypi.douban.com/simple