运行爬虫群老是抓取其他几个规则怎么就解决?我有四级规则,想从第一级开始从头运行抓取,但开启爬虫群就运行3,4级规则,怎么设置?
举报 使用道具
| 回复

共 1 个关于本帖的回复 最后回复于 2017-10-24 17:46

沙发
彩虹租房 新手上路 发表于 2017-10-24 17:46:48 | 只看该作者
启动爬虫群运行第一级规则,会自动运行3,4级规则,这是因为3,4级规则有线索并且也在调度池内,只要调度池内的规则有线索,爬虫群就会去调取运行,不管是哪一规则,并且没有先后顺序,要想不运行3,4级规则:
1,可以把3,4级规则的线索全部去活 或删除;
2,也可以把3,4级规则移出调度池,爬虫群就不会自动运行3,4级规则了。
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-5-7 07:32