python爬虫项目1:爬取一周天气情况
程序员文章站
2022-03-22 20:24:17
...
目录
1、导入必需的库
2、模拟浏览器得到数据
3、查找并获取到爬取的部分
4、对查找到的部分数据进行爬取
5、写入文件
6、代码和结果展示
1、导入必需的库
urllib库:这个安装python自带的库,也可以使用第三方更加方便强大的库requests,这个库需要自己去手动安装,在cmd里面使用pip install requests安装就好了
csv库:属于安装pytohn环境自带的库,不需要再去手动安装
BeautifulSoup库:这个库需要手动安装,BeautifulSoup是一个网页解析库,它支持很多解析器,不过最主流的有两个。一个是python标准库,一个是lxml HTML 解析器。两者的使用方法相似:
from bs4 import BeautifulSoup
# Python的标准库
BeautifulSoup(html, 'html.parser')
# lxml
BeautifulSoup(html, 'lxml')
2、模拟浏览器得到数据
3、查找并获取到爬取的部分
4、对查找到的部分数据进行爬取
5、写入文件
6、代码和结果展示
输出的重庆天气为
上一篇: js 怎么判断数字相等
下一篇: Web绘图标准—SVG和Canvas