PHP深层扫描,该怎么处理
程序员文章站
2022-06-10 12:41:27
...
PHP深层扫描
我想抓取网页中的内容时
file_get_contents 参数填入url就可以获得当前的内容
现在我想做的是如何深层抓取?
难道是遇到 a标签后 就获取url 然后再file_get_contents
一直这么遍历下去吗？？
不知道有没好的思路呢？
------解决方案--------------------
爬虫么？
不外乎两种常见的遍历形式：
1.深度扫描，类似图的深度遍历。递归是最容易理解的方式。
2.广度扫描。即按照层次的方式来扫描网页。容易实现且可以控制抓取的层次。
你说的方式基本就是深度爬虫的策略。ps：这个相当耗时额。
我想抓取网页中的内容时
file_get_contents 参数填入url就可以获得当前的内容
现在我想做的是如何深层抓取?
难道是遇到 a标签后 就获取url 然后再file_get_contents
一直这么遍历下去吗？？
不知道有没好的思路呢？
------解决方案--------------------
爬虫么？
不外乎两种常见的遍历形式：
1.深度扫描，类似图的深度遍历。递归是最容易理解的方式。
2.广度扫描。即按照层次的方式来扫描网页。容易实现且可以控制抓取的层次。
你说的方式基本就是深度爬虫的策略。ps：这个相当耗时额。
声明：本文内容由网友自发贡献，版权归原作者所有，本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容，请联系admin@php.cn核实处理。
相关文章
相关视频
上一篇： php中文转换成拼音代码
推荐阅读