php 网络爬虫,该如何解决

php 网络爬虫
有开发过类似程序的高手吗？能够给点指点哦。功能需求是从网站自动获取相关数据，然后存入数据库。

PHP 网络爬虫 数据库 行业数据

分享到：
------解决方案--------------------
curl爬取目标网站，正则或者DOM获取相应的数据，然后存数据库或者文件。
也没有太难的东西吧。你需要考虑的有：
爬取的策略（只抓取特定域名的，深度优先还是广度优先）。

爬取的效率（可开多线程去爬取，如何分配各个爬虫的任务）

等。。。。。。。。

声明：本文内容由网友自发贡献，版权归原作者所有，本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容，请联系[e-mail]核实处理。

相关文章

相关视频

---

• 关于中英数字混的字串符分割问题_PHP教程
• 应用PHP标签模板实现什么任务_PHP教程
• php入门教程 精简版_PHP教程
• require(),include(),requi...
• php 网络爬虫,该如何解决

• PHP开发基础教程之简介
• PHP新手入门之简介
• PHP开发基础教程之环境搭建
• php学习路线介绍
• php环境配置

网友评论

文明上网理性发言，请遵守 新闻评论服务协议

我要评论

立即提交

专题推荐

• 独孤九贱-php全栈开发教程

  全栈 170W+

  主讲：Peter-Zhu 轻松幽默、简短易学，非常适合PHP学习入门

• 玉女心经-web前端开发教程

  入门 80W+

  主讲：灭绝师太 由浅入深、明快简洁，非常适合前端学习入门

• 天龙八部-实战开发教程

  实战 120W+

  主讲：西门大官人 思路清晰、严谨规范，适合有一定web编程基础学习

作者信息

认证0级讲师

发布技术文章

• 最新文章
• 热门排行

• PHP 安装配置教程大全（最新）
• 教你使用PHP数据库迁移工具“Phinx”
• 一文详解Windows和Linux环境下怎么安装配置PHP
• 详解win10下PHP的安装配置（以php5.6为例）
• 【DTM】PHP协程客户端v0.1 beta版本发布啦！
• 【吐血整理】28个关于PHP核心技术的面试题，助力跳槽！
• php Swoole实现毫秒定时计划任务（详解）
• 用PHP将女友照片转成可爱的动漫头像！

• 循环大量数据导致内存超出，不增加内存如何解决该问题
• VPN是什么
• 最全最详细的PHP面试题(带有答案)
• PHP四大主流框架的优缺点总结
• PHP快速搭建一个简单的QQ机器人
• API常用签名验证方法(PHP实现)
• PHP常用日期时间操作合集
• Mac电脑设置hosts的方法（图文步骤）

推荐视频教程

javascript初级视频教程

jquery 基础视频教程

视频教程分类

• php视频教程
• html视频教程
• css视频教程
• JS视频教程
• jQuery视频教程
• mysql视频教程
• Linux视频教程
• Python视频教程