思想中国层级抓取第二级

Fiona1_

请各位前辈和管理员帮忙看一下我该怎么解决这个问题，谢谢啦！

Fuller · 发表于 2024-3-3 19:19:32

我测试了，运行完第一级以后，如果翻3页，可以看到为第二级产生了31条线索，其中一条是定义规则的时候产生的线索。说明数量没有错。运行第二级的时候，数量这里填31，就能采集下来所有

Fuller · 发表于 2024-3-3 19:31:55

我正在运行第二级，目前还没有发现有失败的线索，但是，每一页采集时间都很长，因为要下载图片，而且数量很多。有些图片网址下载不下来，所以等待时间很长。在设置界面上，把超时时长设置成60秒就够用了

Fuller · 发表于 2024-3-3 20:03:20

第二级采集也没有问题。因为第二级要下载图片，导出的excel表中每一条新闻占很多行，每行是一个图片

Fiona1_ · 发表于 2024-3-10 11:03:08

好的，非常感谢管理员的帮助，谢谢！我在再尝试一下

Fiona1_ · 发表于 2024-3-10 11:03:53

Fuller 发表于 2024-3-3 20:03
第二级采集也没有问题。因为第二级要下载图片，导出的excel表中每一条新闻占很多行，每行是一个图片

好的，非常感谢管理员的帮助，谢谢！我再尝试一下（不好意思点支持手滑点错了

共 5 个关于本帖的回复最后回复于 2024-3-10 11:03

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页