我有两级规则A和B,A在设置路线工作台上设置了翻页规则,目标任务名是B。也就是说,我定义的翻页规则跟普通的翻页规则不一样,翻页以后任务名变了。

我想让网络爬虫在两级规则上有不同的调度参数,比如,滚屏次数和翻页次数要不一样,因为两类网页的长度不一样。集搜客网络爬虫是否能实现?


举报 使用道具
| 回复

共 3 个关于本帖的回复 最后回复于 2021-2-8 16:31

沙发
Fuller 管理员 发表于 2021-2-8 16:28:44 | 只看该作者
集搜客网络爬虫的增强版叫数据管家,可以支持这种情况。举个例子



红框中的两个任务分别是第一级和第二级,给两个任务都设置调度参数,但是要关闭第二级任务的调度,箭头指向的那个按钮点一下就关闭,再点一下就打开。一定要关闭第二级的,否则第二级会被爬虫独立运行了。

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
板凳
发誓学好内容分析 金牌会员 发表于 2021-2-8 16:29:15 | 只看该作者
很神奇,集搜客网络爬虫太好用了,竟然有这么强大的操作
举报 使用道具
地板
Fuller 管理员 发表于 2021-2-8 16:31:05 | 只看该作者
发誓学好内容分析 发表于 2021-2-8 16:29
很神奇,集搜客网络爬虫太好用了,竟然有这么强大的操作


不过,这个功能很少使用,如果遇到问题告诉我们。另外,要及时升级集搜客爬虫软件,我们每个月都会有升级,增加新的功能,并且修改bug
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 话题分析(NMF模型和LDA模型)软件的安装和
  • 运行Apple无法验证的程序的方法
  • 文本聚类分析软件的安装和使用方法
  • 利用AI阅读和分析文本:扣子COZE记录用户反
  • 在网页片段内直观标注——以B站评论采集为

热门用户

GMT+8, 2025-2-6 22:16