规则停下来，直接跳过翻页采集了

请教下各位大侠，只要每一页的，页面中，有此原素，爬虫就会跳过下面的所有几行数据 ，直接翻页采集，不知哪儿设置出问题，盼指教，甚为感谢

在这个网页上做了什么连续动作？比如，是点击吗？点击的xpath是怎么写的？

有这样的网页的时候，连续动作做了以后，有什么现象发生？

Fuller 发表于 2020-6-9 16:39
有这样的网页的时候，连续动作做了以后，有什么现象发生？

未做点击动作，未做任何设置 ，只是遇到此原素，下面所有的行数，直接跳过，跳至另外一页采集

goodhanbin 发表于 2020-6-9 16:41
未做点击动作，未做任何设置 ，只是遇到此原素，下面所有的行数，直接跳过，跳至另外一页采集
...

在这个网页上只是采集数据，并不做连续动作？

如果只是采集数据，遇到这个样式，就无法采集下面的行了，这个只需要检查整理箱做的映射是否合适。把规则加载上来，把网页翻页到这样的网页，然后用菜单 规则-》刷新页面结构，在选择菜单 规则-》分析页面。

如果分析成功了，点击测试按钮，看看采集到的数据全不全。如果下面的行没有，要检查一下生成的规则与这个网页的匹配情况

Fuller 发表于 2020-6-9 16:47
在这个网页上只是采集数据，并不做连续动作？

如果只是采集数据，遇到这个样式，就无法采集下面的行了， ...

分析时没有问题，测试数据完整，详见附件动图

Fuller 发表于 2020-6-9 16:47
在这个网页上只是采集数据，并不做连续动作？

如果只是采集数据，遇到这个样式，就无法采集下面的行了， ...

这是，采集数据完整 的操作动作



以下，是采集完成之后，数据图

goodhanbin 发表于 2020-6-9 17:03
这是，采集数据完整 的操作动作

看样子是在这一页上不滚屏，就不会加载后面的内容。这个规则是不是连续动作以后出现的页面？连续动作以后，所有的自动滚屏动作都禁止了。要执行滚屏，得加上滚屏连续动作

用滚屏连续动作会产生一些冗余数据，因为滚一次采集一次

Fuller 发表于 2020-6-9 17:19
看样子是在这一页上不滚屏，就不会加载后面的内容。这个规则是不是连续动作以后出现的页面？连续动作以后 ...

未作连续动作