前嗅ForeSpider脚本教程-频道脚本:脚本采集数据
程序员文章站
2022-07-14 08:31:45
...
今天,小编给大家带来的教程为:前嗅ForeSpider脚本教程中频道脚本,脚本采集数据的实战教程。具体内容如下:
一.场景
此处为高手操作,配置的频道脚本接管所有采集流程,无需再做任何配置。
二.示例
获取下图商品的评论。
三.脚本实例
var gdoc = EXTRACT.OpenDoc(this,"http://product.dangdang.com/index.php?r=comment%2Flist&productId=26315044&categoryPath=01.05.12.00.00.00&mainProductId=26315044&mediumId=0&pageIndex=1&sortType=1&filterType=1&isSystem=1&tagId=0&tagFilterCount=0&template=publish",0);
if(gdoc){
jScript js;
record rec;
dom d;
var jsonStr = gdoc.GetDom().GetSource().ToStr();
var json = js.RunJson(d.UnEscape(jsonStr));
var domm = OpenDom(json.data.list.html);
var div = domm.FindClass("item_wrap");
var itemCom = div.Child;
while(itemCom){
record re;
re.hk = 1;
re.content = domm.FindClass("describe_detail","div",itemCom);
RESULT.AddRec(re,1);
itemCom = itemCom.next;
}
EXTRACT.CloseDoc(gdoc);
}
推荐阅读
-
前嗅ForeSpider脚本教程-链接抽取:链接在源码的js变量里写脚本
-
前嗅ForeSpider脚本教程-链接抽取:自定义链接写脚本
-
前嗅ForeSpider脚本教程-数据抽取脚本实战教程
-
前嗅ForeSpider脚本教程-频道脚本:脚本采集数据
-
前嗅ForeSpider脚本教程-链接过滤脚本
-
前嗅ForeSpider脚本教程-链接抽取:链接在POST请求里写脚本
-
前嗅ForeSpider脚本教程-链接抽取:应用场景及链接在源码的html标签里写脚本
-
前嗅ForeSpider采集教程:采集【链接列表】的数据 大数据 爬虫 数据采集 采集链接
-
前嗅ForeSpider采集教程:采集安居客列表数据 大数据 安居客 数据采集 爬虫软件
-
前嗅ForeSpider数据采集教程:通过识别列表进行数据抽取 数据采集 大数据 爬虫