前嗅ForeSpider脚本教程-频道脚本:脚本采集数据

今天,小编给大家带来的教程为:前嗅ForeSpider脚本教程中频道脚本,脚本采集数据的实战教程。具体内容如下:

一.场景

此处为高手操作,配置的频道脚本接管所有采集流程,无需再做任何配置。

 

二.示例

获取下图商品的评论。

前嗅ForeSpider脚本教程-频道脚本:脚本采集数据

 

三.脚本实例

var gdoc = EXTRACT.OpenDoc(this,"http://product.dangdang.com/index.php?r=comment%2Flist&productId=26315044&categoryPath=01.05.12.00.00.00&mainProductId=26315044&mediumId=0&pageIndex=1&sortType=1&filterType=1&isSystem=1&tagId=0&tagFilterCount=0&template=publish",0);
if(gdoc){
  jScript js;
  record rec;
  dom d;
  var jsonStr = gdoc.GetDom().GetSource().ToStr();
  var json = js.RunJson(d.UnEscape(jsonStr));
  var domm = OpenDom(json.data.list.html);
  var div = domm.FindClass("item_wrap");
  var itemCom = div.Child;
while(itemCom){
      record re;
      re.hk = 1;
      re.content = domm.FindClass("describe_detail","div",itemCom);
      RESULT.AddRec(re,1);
      itemCom = itemCom.next;
              }
  EXTRACT.CloseDoc(gdoc);
       }