爬虫框架urllib 之(二) --- urllib基础
程序员文章站
2022-04-11 08:53:30
urllib 官方文档:https://docs.python.org/zh-cn/3/library/urllib.html urllib介绍 Urllib是python内置的HTTP请求库,是python提供的一个用于发起和处理http请求和响应的框架。 后期的一些框架,比如: requests ......
urllib
官方文档:
urllib介绍
urllib是python内置的http请求库,是python提供的一个用于发起和处理http请求和响应的框架。
后期的一些框架,比如: requests、 scrapy等都是基于它
包括以下四个模块:
urllib.error 异常处理模块
urllib.request 请求模块
urllib.parse url解析模块
urllib.robotparser robots.txt解析模块
推荐阅读
-
详解Python3网络爬虫(二):利用urllib.urlopen向有道翻译发送数据获得翻译结果
-
python爬虫之urllib库常用方法用法总结大全
-
零基础写python爬虫之使用Scrapy框架编写爬虫
-
零基础写python爬虫之爬虫框架Scrapy安装配置
-
零基础写python爬虫之urllib2使用指南
-
零基础写python爬虫之使用urllib2组件抓取网页内容
-
零基础写python爬虫之urllib2中的两个重要概念:Openers和Handlers
-
爬虫基础框架 之urllib(一) --- urllib基础
-
python爬虫之urllib,伪装,超时设置,异常处理的方法
-
Python3爬虫之urllib携带cookie爬取网页的方法