欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页

ubutun 搭建scrapy环境

程序员文章站 2022-05-28 18:43:51
...

scrapy官方文档

ubutun 搭建scrapy环境

本人ubutun系统只有python3,无python2(可以了解python。 2020不在更新python两年前的了解,目前不知道),可以跳过安装python3

一、安装以下依赖项

sudo apt-get install  python3-dev python3-pip libxml2-dev libxslt1-dev zlib1g-dev libffi-dev libssl-dev

二、安装scrapy

pip3 install scrapy

ubutun 搭建scrapy环境

三、配置环境变量
1、更新PATH变量以声明应在系统软件包之前使用自制软件软件包(用户登录才执行环境变量)

echo "export PATH=/usr/local/bin:/usr/local/sbin:$PATH" >> ~/.bashrc

2、重新加载.bashrc以确保已进行更改

source  ~/.bashrc

3、退出当前的tty连接重新登录
ubutun 搭建scrapy环境

四、查看scrapy版本
ubutun 搭建scrapy环境

相关标签: scrapy爬虫框架