欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页

windows下安装scrapy

程序员文章站 2022-05-09 22:56:45
...

安装scrapy前需要安装wheel、lxml、Twisted、pywin32,最后再安装scrapy

1. 更新pip

On Windows :

python -m pip install -U pip

2. 安装wheel、lxml、Twisted、pywin32

  1. lxml这个库是用来做xpath提取的
pip intsall lxml
  1. 安装wheel
pip install wheel
  1. 安装Twisted
    在这个网址中下载合适的Twisted文件
    网站比较乱,建议使用快捷搜索ctrl + f搜索Twisted
Twisted‑19.2.0‑cp27‑cp27m‑win32.whl
Twisted‑19.2.0‑cp27‑cp27m‑win_amd64.whl
Twisted‑19.2.0‑cp35‑cp35m‑win32.whl
Twisted‑19.2.0‑cp35‑cp35m‑win_amd64.whl
Twisted‑19.2.0‑cp36‑cp36m‑win32.whl
Twisted‑19.2.0‑cp36‑cp36m‑win_amd64.whl
Twisted‑19.2.0‑cp37‑cp37m‑win32.whl
Twisted‑19.2.0‑cp37‑cp37m‑win_amd64.whl

其中 cp27 是指 python2.7版本, cp36是指python3.6版本,下载和自己电脑对应python版本, 32位的和64位的文件都试一下
管理员模式运行cmd,使用cd 下载文件的路径 指令,到这个路径下
使用pip install Twisted‑19.2.0‑cpxx.....安装下载的文件
出现Twisted-19.2.0-cp36-cp36m-win32.whl is not a supported wheel on this platform.表示不支持,尝试其它文件

  1. 安装pywin32
    这个我使用pip install pywin32就成功安装了,安装未成功可以尝试使用手动安装的方法
    pywin32文件下载地址
    下载对应python版本的pywin32的exe文件(需要运行),如果报错就选择其它文件,安装成功后在cmd中输入python,然后输入 import win32con或者import win32api没有报错说明安装pywin32成功了

  2. 安装scrapy
    wheel、lxml、Twisted、pywin32安装成功后就可以通过pip命令安装scrapy了
    使用pip install scrapy安装scrapy