利用curl抓取网页数据，phantomjs..请神人解
有大大说用 phantomjs来抓取html
目前的js如
var page = require('webpage').create();
var url = 'http://www.cbssports.com/mlb/gametracker/live/MLB_20140528_CLE@CHW';
page.open(url, function (status) {
var js = page.evaluate(function () {
return document;
});
console.log(js.all[0].outerHTML);
phantom.exit();
});
误错，显示不出正确的hmtl
另 phontomjs是一个执行档，我要怎么每秒让他自动执行，用 php ? 因为在php 里我目前只能用
exec("start d:\phantomjs script.js ")
让它自动产生本文档，然后针对本文档作解析，但一直没有办法执行，求神人解
2014 05 23 更新
之前在网站上有提出，有抓到几个数据。
先看一下我的程序如下：
$url ="http://www.cbssports.com/mlb/gametracker/live/MLB_20140529_SF@STL";
$ch = curl_init();
curl_setopt($ch, CURLOPT_HEADER, 0);
curl_setopt($ch, CURLOPT_URL, $url);
curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
curl_setopt($ch, CURLOPT_USERAGENT, "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.22 (KHTML, like Gecko) Chrome/25.0.1364.172 Safari/537.22");
curl_setopt($ch, CURLOPT_FOLLOWLOCATION ,1);
curl_setopt($ch, CURLOPT_CONNECTTIMEOUT, 0);
$data = curl_exec($ch);
preg_match_all('/(.?)/is',$data,$teamCity);
preg_match_all('/(.?)/is',$data,$teamName);…….以下为正规化
未抓出的资料部份如下：(红字为抓不出来的)(以下只是部份)
里面会有一个
或是
div class=”batter-pitcher fleft”>
table>里面的
的资料都抓不出来
重点在于，部份的数据，不管你用什么浏览器的「另存新檔」 save as 或是 「检视原始码」，都看不到上列的这数据。 而 div class=”batter-pitcher fleft” 这部份的资料目前已知是 JS 的 batter_ingame_stats function是跑「进行比赛中的」
而另一个function function() { CBSi.app.BaseRunners = function(args 则是跑 「谁在垒上」右下角那个 「球场的图标」的数据 ，目前只剩这几个部份抓不出。
很多神人大大说，「就抓js呀」，但是，就问不到要如何抓。
跪求各位大大给个方向。
这一个话题的 讨论在：http://segmentfault.com/q/1010000000522277
目前直播赛事：http://www.cbssports.com/mlb/gametracker/live/MLB_20140529_SF@STL
回复内容：
小弟昨天有发文请教，有很多的神人给我小弟很大的帮忙，目前只剩下一小块的数据未抓到。
有大大说用 phantomjs来抓取html
目前的js如
var page = require('webpage').create();
var url = 'http://www.cbssports.com/mlb/gametracker/live/MLB_20140528_CLE@CHW';
page.open(url, function (status) {
var js = page.evaluate(function () {
return document;
});
console.log(js.all[0].outerHTML);
phantom.exit();
});
误错，显示不出正确的hmtl
另 phontomjs是一个执行档，我要怎么每秒让他自动执行，用 php ? 因为在php 里我目前只能用
exec("start d:\phantomjs script.js ")
让它自动产生本文档，然后针对本文档作解析，但一直没有办法执行，求神人解
2014 05 23 更新
之前在网站上有提出，有抓到几个数据。
先看一下我的程序如下：
$url ="http://www.cbssports.com/mlb/gametracker/live/MLB_20140529_SF@STL";
$ch = curl_init();
curl_setopt($ch, CURLOPT_HEADER, 0);
curl_setopt($ch, CURLOPT_URL, $url);
curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
curl_setopt($ch, CURLOPT_USERAGENT, "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.22 (KHTML, like Gecko) Chrome/25.0.1364.172 Safari/537.22");
curl_setopt($ch, CURLOPT_FOLLOWLOCATION ,1);
curl_setopt($ch, CURLOPT_CONNECTTIMEOUT, 0);
$data = curl_exec($ch);
preg_match_all('/(.?)/is',$data,$teamCity);
preg_match_all('/(.?)/is',$data,$teamName);…….以下为正规化
未抓出的资料部份如下：(红字为抓不出来的)(以下只是部份)
里面会有一个
或是
div class=”batter-pitcher fleft”>
table>里面的
的资料都抓不出来
重点在于，部份的数据，不管你用什么浏览器的「另存新檔」 save as 或是 「检视原始码」，都看不到上列的这数据。 而 div class=”batter-pitcher fleft” 这部份的资料目前已知是 JS 的 batter_ingame_stats function是跑「进行比赛中的」
而另一个function function() { CBSi.app.BaseRunners = function(args 则是跑 「谁在垒上」右下角那个 「球场的图标」的数据 ，目前只剩这几个部份抓不出。
很多神人大大说，「就抓js呀」，但是，就问不到要如何抓。
跪求各位大大给个方向。
这一个话题的 讨论在：http://segmentfault.com/q/1010000000522277
目前直播赛事：http://www.cbssports.com/mlb/gametracker/live/MLB_20140529_SF@STL
这么写
var page = require('webpage').create();
page.open('http://segmentfault.com/', function(status) {
var ua = page.evaluate(function() {
return document.body.outerHTML;
});
console.log(ua);
phantom.exit();
});
声明：本文内容由网友自发贡献，版权归原作者所有，本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容，请联系admin@php.cn核实处理。
相关文章
相关视频
-
两款万能的php分页类，两款php分页_PHP教程
-
php生成图片缩略图的方法，_PHP教程
-
PHP4.0.1的变化（三）_PHP教程
-
PHP 编码规范(9)_PHP教程
-
利用curl抓取网页数据，phantomjs..请...
专题推荐
-
独孤九贱-php全栈开发教程全栈 170W+
主讲：Peter-Zhu 轻松幽默、简短易学，非常适合PHP学习入门
-
玉女心经-web前端开发教程入门 80W+
主讲：灭绝师太 由浅入深、明快简洁，非常适合前端学习入门
-
天龙八部-实战开发教程实战 120W+
主讲：西门大官人 思路清晰、严谨规范，适合有一定web编程基础学习
作者信息
- 最新文章
- 热门排行
网友评论
文明上网理性发言，请遵守 新闻评论服务协议
我要评论