网络爬虫软件爬数据的时候是否可以限制翻页次数

发誓学好内容分析

我知道可以在调度中心里设置翻页次数，但是要设置自动调度，还要启动爬虫群，那样挺麻烦的。我只是想在定义完采集规则以后测试一下数据，想翻几页，然后入库导出数据后做一些检查。如果都要设置爬虫群，就太麻烦了。

能不能在启动网络爬虫任务的时候，设置爬取的次数？

Fuller · 发表于 2020-11-5 16:45:36

集搜客网络爬虫软件 V10版开始，在启动采集的时候，可以输入翻页次数，如果不数据，就是翻页到底。 V10版是新版网络爬虫，有个另外的名字是“数据管家”，内核和界面都是全新设计。如下图所示设置翻页次数

共 1 个关于本帖的回复最后回复于 2020-11-5 16:45

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页