快捷导航
第一级规则爬取列表,第二级规则爬取内容,都设置了激活,有个疑问:第二级线索是增量的,每次定时激活会全部执行,线索数量越来越多,采集时间越来越长。

举报 使用道具
| 回复

共 1 个关于本帖的回复 最后回复于 7 天前

bowieD 中级会员 发表于 7 天前 | 显示全部楼层
在一级规则的会员中心--爬虫群--调动--高级设置里面,把调度参数"激活下级线索"选择"否", 这样下一级就只会新增, 已经存在的就不会再自动激活,这样二级规则就只会执行抓取每天新增的线索。
21.png
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 从淘宝的买家评论中,能挖掘出什么有用的信
  • 连续动作:如何把抓到的信息与动作步骤对应
  • 淘宝开店运营十大攻略
  • 深圳市咨询投诉分析
  • 去资源库下载规则,轻松抓数据

热门用户

集搜客GooSeeker网络爬虫 ( 粤ICP备11065265号-2 )

GMT+8, 2017-9-21 00:20