Ubuntu16.04 64位安装 Scrapy环境
程序员文章站
2022-05-09 22:00:51
...
运用场景
我们在自己的服务器上部署自己的爬虫项目时,必须要配置好环境才可以进行运行的。
1. 创建虚拟环境
2. 安装Scrapy包
创建虚拟环境
1. 安装虚拟环境
pip install virtualenv
2. 使用virtualenvwrapper管理我们的虚拟环境
①.新建虚拟环境: mkvirtualenv Scrapy(虚拟环境名字)
②.进入虚拟环境并**
安装Scrapy相关的包
Scrapy的相关依赖包比较多,所以我们先安装依赖包
python3.5 -dev 、OpenSSL、Twisted
主要问题出在这三个包上面所以 我们应该先将这三个包装好在进行安装Scrapy
1. Python 3.5 -dev 这个源码包
直接可以使用 apt-get python3-dev 进行安装,如果报错的话一般就是apt的版本太旧,需要更新一下版本就可以安装啦(sudo apt update)
2. OpenSSL
这个包是通过安装Scrapy 的安装的得到的
3. twisted
上边两个安装完成以后就可以直接用pip install 进行安装
依赖包装完以后,直接安装Scrapy
pip install scrapy
推荐阅读
-
[环境配置]Ubuntu16.04下编译安装gcc6.3.0
-
Ubuntu16.04下伪分布式环境搭建之hadoop、jdk、Hbase、phoenix的安装与配置
-
ubuntu16.04环境下安装anacoda2和TensorFlow1.9
-
Caffe学习1——在ubuntu16.04环境下安装Caffe(CPU)
-
Ubuntu16.04环境下libmemcached客户端安装
-
Common Lisp的ubuntu16.04环境下安装
-
DJI guidance SDK在Ubuntu16.04环境下的安装配置
-
AC8257 ubuntu16.04 android9.0 编译环境搭建---制作启动盘安装ubuntu16.04
-
AC8257 ubuntu16.04 android9.0 编译环境搭建--安装编译环境
-
【TensorFlow 2.0】Ubuntu16.04 虚拟环境中安装TensorFlow 2.0(CPU)