断网后会自动从中断的地方开始吗

AnswerDSL

我问一个问题，如果我再爬取数据的过程中，突然间断开网络了，或者死机了的话，那么重新打开会怎么样？应该怎么做才能从断开的地方继续抓取？

shenzhenwan10 · 发表于 2016-10-20 16:26:41

如果是通过爬虫群来控制爬虫运行的，重新打开后爬虫会继续爬取待抓取状态的线索
如果是手工运行的，再次运行就可以了，爬虫会爬取待抓取状态的线索

shenzhenwan10 · 发表于 2016-10-20 16:27:00

停电或断网那个时刻正在爬取的线索有可能受影响变成失败或正在爬取的状态，可以手工激活

共 2 个关于本帖的回复最后回复于 2016-10-20 16:27

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页