抓取规则匹配失败或超时

holamonica 发表于 2019-7-26 15:35
那一般超时时长最多可以设多少在不影响爬取速度的情况下？

一般60秒就够了，如果网页加载特别慢，可以根据情况把这个数字再提高，但是我觉得再高的话，就会网络问题了，即使能勉强爬到，也太慢了，一小时爬不了几个网页。如果是外网，可以用vpn提高速度

好的，谢谢您  ！ 那我失败的那些都是集搜窗口一片空白，然后在验证规则的过程中就失败了，您觉得这可能是什么原因？

holamonica 发表于 2019-7-26 16:03
好的，谢谢您  ！ 那我失败的那些都是集搜窗口一片空白，然后在验证规则的过程中就失败了，您觉得这可能是 ...

失败以后，在DS打数机窗口下部的日志窗口中能看到一条日志，显示了线索号，按照这个帖子可以加载和分析失败线索：https://www.gooseeker.com/doc/thread-13085-1-1.html

看看加载成什么样子，会不会所用的网址本身就是错误的

Fuller 发表于 2019-7-26 16:07
失败以后，在DS打数机窗口下部的日志窗口中能看到一条日志，显示了线索号，按照这个帖子可以加载和分析失 ...

我前边改过，但是我要改的有点多，哈哈哈 ，等我跑完改改试试 有问题再请教您