层级抓取错误

yinjingClass

我的一级规则名称是浙数文化
二级规则名称是浙数文化文章评论详情

目前一级规则可以抓取，设置页数爬虫
但是二级规则测试正常但是抓取数据不行

yinjingClass · 发表于 2021-6-8 13:44:03

wangyong · 发表于 2021-6-8 14:29:10

yinjingClass 发表于 2021-6-8 13:44

从这个截图看，是采集的网址有问题，不是正常的网址，你把第二级网址确认是可以打开的后，再添加到规则中采集

yinjingClass · 发表于 2021-6-8 14:34:24

wangyong 发表于 2021-6-8 14:29
从这个截图看，是采集的网址有问题，不是正常的网址，你把第二级网址确认是可以打开的后，再添加到规则中 ...

在一级规则中，勾选了补全网址，下级网址选的是二级规则的名称其中一级规则抓取的网址是完整的

wangyong · 发表于 2021-6-8 15:02:59

yinjingClass 发表于 2021-6-8 14:34
在一级规则中，勾选了补全网址，下级网址选的是二级规则的名称其中一级规则抓取的网址是完整的
...

第一级规则中只需要对文章链接勾下级线索，发表时间不需要勾选

把第二级规则中的线索全部删除，然后重新运行第一规则采集，新一轮第一级规则采集完成后，再重新采集第二级规则

删除全部线索

yinjingClass · 发表于 2021-6-8 15:21:57

wangyong 发表于 2021-6-8 15:02
第一级规则中只需要对文章链接勾下级线索，发表时间不需要勾选

把第二级规则中的线索全部删除，然后重 ...

执行失败

yinjingClass · 发表于 2021-6-8 15:31:11

wangyong 发表于 2021-6-8 15:02
第一级规则中只需要对文章链接勾下级线索，发表时间不需要勾选

把第二级规则中的线索全部删除，然后重 ...

导出失败

wangyong · 发表于 2021-6-8 16:51:37

yinjingClass 发表于 2021-6-8 15:31
导出失败

导出失败的原因是在数据导出之前你把规则删除了，这样就导不出来了

共 7 个关于本帖的回复最后回复于 2021-6-8 16:51

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页