欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页

前嗅ForeSpider脚本教程-数据抽取脚本实战教程 博客分类: 教程 前嗅数据采集ForeSpider数据采集采集教程脚本教程 

程序员文章站 2024-03-18 19:12:40
...

今天,小编给大家带来的教程为:前嗅ForeSpider脚本教程-数据抽取脚本实战教程的,应用场景,数据在源码的html标签里写脚本。具体内容如下:

 

一.应用场景

当所需要的数据字段大部分需要配置脚本时,可将所有字段的抽取统一放在数据抽取脚本中。

可能用到的类:DOM、EXTRACT。

配置方法:选中数据抽取,点击“脚本窗口”,点击创建按钮。即可在新建的代码框内输入代码。前嗅ForeSpider脚本教程-数据抽取脚本实战教程
            
    
    博客分类: 教程 前嗅数据采集ForeSpider数据采集采集教程脚本教程 

 

二.数据在源码的html标签里写脚本

目标数据可在源码中查找到。在目标网页右键,选择“查看源代码”,键盘点击“ctrl+F”,查找目标数据所在位置。

1.数据需要循环

场景:目标数据集中分布,如评论数据。

2.数据不循环

场景:目标数据分散分布。

示例:获取聚美优品网,关键词搜索之后的列表页的页数。前嗅ForeSpider脚本教程-数据抽取脚本实战教程
            
    
    博客分类: 教程 前嗅数据采集ForeSpider数据采集采集教程脚本教程 查看源码,得知在源码中的位置。前嗅ForeSpider脚本教程-数据抽取脚本实战教程
            
    
    博客分类: 教程 前嗅数据采集ForeSpider数据采集采集教程脚本教程 

由图可知,页码所在<div>的class属性值唯一,所以可以根据class属性值找到该<div>。

脚本实例:

 

var div = DOM.FindClass(“head_pageInfo”);  //获取目标数据节点位置

var num=DOM.GetTextAll(div).Middle("/",页).ToInt();  //获取目标数据,并转为int型