欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页

网络爬虫框架Scrapy详解之Request

程序员文章站 2022-05-12 09:18:32
...

介绍

Request类是一个http请求的类,对于爬虫而言是一个很重要的类。通常在Spider中创建这样的一个请求,在Downloader中执行这样的一个请求。同时也有一个子类FormRequest继承于它,用于post请求。

在Spider中通常用法:

yield
 scrapy.
Request
(url = 
'zarten.com'
)

类属性和方法有:

 

>>>阅读全文