aspx页面会跳转，PHP怎么file_get_content()进行追踪采集

程序员文章站 2022-05-22 13:30:08

...

aspx页面会跳转，PHP如何file_get_content()进行追踪采集？
搜索关键字「39000038」，
http://www.mouser.cn/Search/Refine.aspx?Keyword=39000038
因为仅有一款，页面会自动跳转到
http://www.mouser.cn/ProductDetail/Molex/39-00-0038/?qs=%2fha2pyFaduicta8SJW6uUsrinUHZLSGN9RfyeL103Gs%3d

搜索关键字「3900003」，有多款产品是一个列表
http://www.mouser.cn/Search/Refine.aspx?Keyword=3900003

我想知道，它是直接在.net中直接判断然后跳转的，还是用js判断跳转的

我要用php的file_get_content()函数抓取
http://www.mouser.cn/Search/Refine.aspx?Keyword=39000038
如何才能跟踪到
http://www.mouser.cn/ProductDetail/Molex/39-00-0038/?qs=%2fha2pyFaduicta8SJW6uUsrinUHZLSGN9RfyeL103Gs%3d
------解决方案--------------------
file_get_contents 是办不到的

function curl_get($durl) {
  $t = parse_url($durl);
  $ch = curl_init();
  curl_setopt($ch, CURLOPT_URL,$durl);
  curl_setopt($ch, CURLOPT_TIMEOUT,5);
  curl_setopt($ch, CURLOPT_USERAGENT, $_SERVER['HTTP_USER_AGENT']);
  curl_setopt($ch, CURLOPT_REFERER, "http://$t[host]/");
  curl_setopt($ch, CURLOPT_RETURNTRANSFER,1);
  curl_setopt($ch, CURLOPT_FOLLOWLOCATION, true);
  $r = curl_exec($ch);
  curl_close($ch);
  return $r;
}

echo curl_get( 'http://www.mouser.cn/Search/Refine.aspx?Keyword=39000038');

声明：本文内容由网友自发贡献，版权归原作者所有，本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容，请联系admin@php.cn核实处理。