aspx页面会跳转，PHP怎么file_get_content()进行追踪采集

程序员文章站 2022-05-28 15:25:45

...

aspx页面会跳转，PHP如何file_get_content()进行追踪采集？
搜索关键字「39000038」，
http://www.mouser.cn/Search/Refine.aspx?Keyword=39000038
因为仅有一款，页面会自动跳转到
http://www.mouser.cn/ProductDetail/Molex/39-00-0038/?qs=%2fha2pyFaduicta8SJW6uUsrinUHZLSGN9RfyeL103Gs%3d

搜索关键字「3900003」，有多款产品是一个列表
http://www.mouser.cn/Search/Refine.aspx?Keyword=3900003

我想知道，它是直接在.net中直接判断然后跳转的，还是用js判断跳转的

我要用php的file_get_content()函数抓取
http://www.mouser.cn/Search/Refine.aspx?Keyword=39000038
如何才能跟踪到
http://www.mouser.cn/ProductDetail/Molex/39-00-0038/?qs=%2fha2pyFaduicta8SJW6uUsrinUHZLSGN9RfyeL103Gs%3d
------解决方案--------------------
file_get_contents 是办不到的

function curl_get($durl) {

  $t = parse_url($durl);

  $ch = curl_init();

  curl_setopt($ch, CURLOPT_URL,$durl);

  curl_setopt($ch, CURLOPT_TIMEOUT,5);

  curl_setopt($ch, CURLOPT_USERAGENT, $_SERVER['HTTP_USER_AGENT']);

  curl_setopt($ch, CURLOPT_REFERER, "http://$t[host]/");

  curl_setopt($ch, CURLOPT_RETURNTRANSFER,1);

  curl_setopt($ch, CURLOPT_FOLLOWLOCATION, true);

  $r = curl_exec($ch);

  curl_close($ch);

  return $r;

}


echo curl_get( 'http://www.mouser.cn/Search/Refine.aspx?Keyword=39000038');

声明：本文内容由网友自发贡献，版权归原作者所有，本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容，请联系admin@php.cn核实处理。