我正在抓数据,突然断网了,我抓的数据是不是都没了,需要重新抓啊??
举报 使用道具
| 回复

共 1 个关于本帖的回复 最后回复于 2016-10-17 18:12

沙发
Fuller 管理员 发表于 2016-10-17 18:12:38 | 只看该作者
数据是随时存储的,抓一页存一页,不会因为突然停电就丢失了。

是否需要重抓,要分两种情况:
情况1:正在翻页抓取,如果翻到中间断了,那么这次翻页就得从头开始
情况2:正在抓取有独立网址的单页,如果断网了,只是这一页抓取失败了。

重新抓取的方法是:激活失败线索。可以在DS打数机上用菜单激活,也可以在会员中心激活线索,会员中心有排序功能,可以把所有失败的都排出来
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 利用AI阅读和分析文本:扣子COZE记录用户反
  • 在网页片段内直观标注——以B站评论采集为
  • 利用AI阅读和分析文本:使用COZE建设游记文
  • 使用AI工具Kimi生成python代码为文本分析结
  • 苹果mac电脑安装集搜客网络爬虫软件失败的

热门用户

GMT+8, 2024-11-22 08:07