做规则单搜采集中,出现这个提示怎么解决?
提示如下:

举报 使用道具
| 回复

共 5 个关于本帖的回复 最后回复于 2020-3-13 17:36

沙发
lan_1985 金牌会员 发表于 2020-3-13 14:43:27 | 只看该作者
本帖最后由 lan_1985 于 2020-3-13 17:45 编辑

1、使用单搜集搜,出现的一个任务排队等待提示
2、可以用爬虫群抓取,爬虫群会自动恢复采集爬虫群设置方法参考教程:https://www.gooseeker.com/doc/article-474-1.html
举报 使用道具
板凳
月球漫步 中级会员 发表于 2020-3-13 14:46:31 | 只看该作者
好的,明白了。
但是我要采集的是图片 爬虫群也能保存图片吗?
举报 使用道具
地板
lan_1985 金牌会员 发表于 2020-3-13 14:53:53 | 只看该作者
这个不影响,采集的结果是一样的,只是采集方法不同。
举报 使用道具
5#
月球漫步 中级会员 发表于 2020-3-13 15:00:44 | 只看该作者
好的,感谢
举报 使用道具
6#
Fuller 管理员 发表于 2020-3-13 17:36:21 | 只看该作者
服务器忙的时候下面这些方面是不受影响的:1,当前运行的爬虫线索会一直运行到结束,比如,一直翻页结束,抓取内容和下载图片也会完成

受影响的方面:
1,如果这条线索运行结束了,要把线索状态设置成“完成”,如果遇到服务器忙,这个线索状态会停留在“采集中"
2,如果单搜的时候,输入的线索数大于1,比如,10,假设已经运行到了8,8完成以后,如果遇到服务器忙,后面的线索就拿不到了
3,如果是爬虫群模式,跟单搜类似,会拿不到线索,从而这批任务就结束了,会一直等服务器不忙了,才去拿线索
4,线索激活操作和其他管理操作也不再受理

所以,这个时候,应该等待10分钟。如果是爬虫群模式,会自动恢复,如果是手工启动的采集,等10分钟以后再次启动采集
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-5-8 11:36