欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页  >  科技

vscode怎么创建scrapy项目? vscode新建项目的技巧

程序员文章站 2022-03-24 17:18:33
vscode怎么创建scrapy项目? vscode新建项目的技巧...

vscode如何创建scrapy项目,创建新项目很简单,下面我们就来看看详细的教程。

一、创建方法

1、首先打开vscode

vscode怎么创建scrapy项目? vscode新建项目的技巧

2、切换到终端中

vscode怎么创建scrapy项目? vscode新建项目的技巧

3、输入图中的代码。

vscode怎么创建scrapy项目? vscode新建项目的技巧

4、然后在文件列表中找到刚才创建的项目。

vscode怎么创建scrapy项目? vscode新建项目的技巧

5、打开项目列表,确认文件创建正常即可。

vscode怎么创建scrapy项目? vscode新建项目的技巧

二、创建scrapy项目以及运行scrapy项目的方法

1、准备工作当然是在vscode中进入命令行了,如图所示,我在vscode中进入了一个文件夹。

vscode怎么创建scrapy项目? vscode新建项目的技巧

2、然后使用命令创建scrapy项目,当然,你要先搭建好scrapy框架,这样才可以使用scrapy命令哦,jy可变,代表scrapy项目名称。

vscode怎么创建scrapy项目? vscode新建项目的技巧

3、之后,scrapy项目便会创建好了,这个spiders文件夹就是用来存放爬虫文件的哦。

vscode怎么创建scrapy项目? vscode新建项目的技巧

4、而scrapy里面的这个settings文件可以设置user-agent,ip以及爬取时间等等。

vscode怎么创建scrapy项目? vscode新建项目的技巧

5、items用来编写字段的,类似数据库的字段哟。pipelines则是处理爬取好的文件的。

vscode怎么创建scrapy项目? vscode新建项目的技巧

6、接着进入spiders文件夹,开始用命令创建爬虫文件。

vscode怎么创建scrapy项目? vscode新建项目的技巧

7、如图,用这个命令便可以创建爬虫文件了,后面要指定一下网址哦,不指定会报错的呀。

vscode怎么创建scrapy项目? vscode新建项目的技巧

8、然后在这里就多了一个myjy(创建的),然后编写爬取规则就可以了。

vscode怎么创建scrapy项目? vscode新建项目的技巧

9、如图,里面有自动生成的内容,name不要改,parse函数也不要改,不然报错。在parse里面写解析规则即可。

vscode怎么创建scrapy项目? vscode新建项目的技巧 

10、运行爬虫文件可以用这个命令,myjy就是爬虫名称,跟name里面的一致哟。

vscode怎么创建scrapy项目? vscode新建项目的技巧

以上就是vscode新建项目的技巧,希望大家喜欢,请继续关注。