多个关键词抓取出错

我们上午安排技术测试下你的任务

要在第二级所用的样本页面上定义输入动作。不然的话，输入完第一个关键词以后，网页就变成第二级那样的页面了，再想输入第二个关键词，就定位不到输入位置了

z417566919 发表于 2021-11-2 09:29
麻烦再看一下“油气储运详情页面数据抓取”这个采集任务，设置周期采集后，并没有执行，是设置有问题么？ ...

你看一下这个任务有没有“待抓取”状态的网址？

z417566919 发表于 2021-11-2 10:12
有啊，可定是有的

调度里的那个定时时间设定，是指到时间后激活网址。 如果本身已经有“待抓取”网址并且开启了调度，只要你打开爬虫群窗口(用爬虫群采集数据)，就会自动抓取。

z417566919 发表于 2021-11-2 10:46
我设置完之后，还要点击“启动爬虫群”？这样的话，不就是立刻执行抓取了么？也不是按照我设置的时间自动 ...

举例来说：
你的任务A， 有网址100条， 状态是”已采集“
现在时间是10：53
如果你现在设置调度， 定时在今天”12：45”抓取， 然后启动爬虫群窗口。
1. 从现在到12：45 ， 由于没有网址是”待采集“状态， 没有实际的爬取动作
2. 到了12：45， 100条网址状态会变成”待采集“， 爬虫群窗口开始爬取