设置了两级任务爬数据，但报错抓取超时，且二级任务里没有看到数据

一级任务设置了连续动作，二级任务抓取数据，抓取网站：http://www.czce.com.cn/cn/jysj/mrhq/H770301index_1.htm





求助！

我测试了你的规则，第二级看起来没有错误，但是针对5日的动力煤ZC就有问题。可以这样验证：
1，加载第二级规则
2，点击右上角的橙色菜单，关闭内容定位功能3，选择日期和类型
4，点击右下角的橙色菜单，刷新DOM
5，点击右上角的橙色菜单，分析页面
就能看到分析失败，说明这个规则针对动力煤是不适用的。

Fuller 发表于 2021-3-18 17:48
我测试了你的规则，第二级看起来没有错误，但是针对5日的动力煤ZC就有问题。可以这样验证：
1，加载第二级 ...

感谢大佬！

问题好像找到了，是这个吧


但这个XPath: //*[@class='date_box3']/table/tbody/tr[position()>=206 and count(td[position()=1])>0 and count(td[position()=6])>0 and count(td[position()=7])>0]是哪里？
为什么搜不到啊？

hhxhdg 发表于 2021-3-19 10:20
感谢大佬！

问题好像找到了，是这个吧

data2这个字段应该是整个整理箱，这个xpath是自动生成的。这个xpath不能编辑，通过调整内部的抓取内容的映射，会自动修改这个xpath。

抓取内容有些字段可能在新页面上对应不上，如果在新页面上没有，那么就不要勾选“关键内容”。如果新页面的结构和样本页面的结构有很大不同，那么可以为第二级任务定义多个规则，他们的任务名字相同，但是规则编号不一样，这样的话，爬虫运行第二级任务的时候，会自动去找一个合适的