欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页

一周搞定scrapy之3,将爬取到的起点中文网信息保存到mysql

程序员文章站 2024-03-14 17:05:58
...

安装mysql

去mysql官网下载
https://dev.mysql.com/downloads/installer/
一周搞定scrapy之3,将爬取到的起点中文网信息保存到mysql
一周搞定scrapy之3,将爬取到的起点中文网信息保存到mysql
(除了这步要改一下,其余的都是默认继续)然后安装路径默认
一周搞定scrapy之3,将爬取到的起点中文网信息保存到mysql
设置密码,最后完成

该之前的代码

(以下是github全部源码)
https://github.com/junasir/qidianhot/tree/master

第一步
改pipelines.py文件一周搞定scrapy之3,将爬取到的起点中文网信息保存到mysql
第二步
改settings.py文件
一周搞定scrapy之3,将爬取到的起点中文网信息保存到mysql
最后我们新建一个py文件,文件名字是start.py

from scrapy import  cmdline

#执行小说热销榜的命令
cmdline.execute("scrapy crawl hot".split())



相关标签: scrapy