欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页

python爬虫项目1:爬取一周天气情况

程序员文章站 2022-03-22 20:24:17
...

目录

1、导入必需的库
2、模拟浏览器得到数据
3、查找并获取到爬取的部分
4、对查找到的部分数据进行爬取
5、写入文件
6、代码和结果展示

1、导入必需的库
python爬虫项目1:爬取一周天气情况
urllib库:这个安装python自带的库,也可以使用第三方更加方便强大的库requests,这个库需要自己去手动安装,在cmd里面使用pip install requests安装就好了
csv库:属于安装pytohn环境自带的库,不需要再去手动安装
BeautifulSoup库:这个库需要手动安装,BeautifulSoup是一个网页解析库,它支持很多解析器,不过最主流的有两个。一个是python标准库,一个是lxml HTML 解析器。两者的使用方法相似:
from bs4 import BeautifulSoup

# Python的标准库

BeautifulSoup(html, 'html.parser')

# lxml

BeautifulSoup(html, 'lxml')

2、模拟浏览器得到数据
python爬虫项目1:爬取一周天气情况

3、查找并获取到爬取的部分
python爬虫项目1:爬取一周天气情况
python爬虫项目1:爬取一周天气情况
python爬虫项目1:爬取一周天气情况python爬虫项目1:爬取一周天气情况
4、对查找到的部分数据进行爬取
python爬虫项目1:爬取一周天气情况
python爬虫项目1:爬取一周天气情况
5、写入文件
python爬虫项目1:爬取一周天气情况
6、代码和结果展示
python爬虫项目1:爬取一周天气情况
python爬虫项目1:爬取一周天气情况
python爬虫项目1:爬取一周天气情况
python爬虫项目1:爬取一周天气情况

输出的重庆天气为
python爬虫项目1:爬取一周天气情况

相关标签: python