滚屏抓取抓取不全

https://h5.youzan.com/v2/feature ... 1&spm=f48575315
这是我要抓取的页面  需要抓标题和价格的  
我按照http://www.gooseeker.com/doc/article-373-1.html这个设置就抓了一半不到的内容不知道什么原因
主题名是xiangqing1

这个网页不是无限瀑布流滚屏网页，可以直接滚到底，用gs打数机的滚屏就可以了，不需要设置连续滚屏动作。

把滚屏动作删除，打开ds打数机的滚屏，将ds打数机中的配置-》滚屏参数中的滚屏次数设置不为0就可以滚屏

bowieD 发表于 2018-5-4 11:20
这个网页不是无限瀑布流滚屏网页，可以直接滚到底，用gs打数机的滚屏就可以了，不需要设置连续滚屏动作。

...

之前是没设置滚屏的   数据还是抓不全  所以才试着用滚屏  

yst8838 发表于 2018-5-4 11:23
之前是没设置滚屏的   数据还是抓不全  所以才试着用滚屏

这个网页滚屏到其中一个分类，其他分类的节点就都隐藏掉了，如果用ds打数机的滚屏去采集只能采集到最后一个分类的数据。

用滚屏动作可以采集，把每次滚屏数设置小一点，控制滚一屏的跨度不能超过一个分类，滚屏动作的跨度设置为1，不要设置为3，额外延时也不用设置那么大，设置1s就可以了

bowieD 发表于 2018-5-4 14:50
这个网页滚屏到其中一个分类，其他分类的节点就都隐藏掉了，如果用ds打数机的滚屏去采集只能采集到最后一 ...

好的  谢谢 我试试

bowieD 发表于 2018-5-4 14:50
这个网页滚屏到其中一个分类，其他分类的节点就都隐藏掉了，如果用ds打数机的滚屏去采集只能采集到最后一 ...

按你说的设置还是没办法完整的抓取完  只能抓取到107美妆和喵选自营的

yst8838 发表于 2018-5-4 15:38
按你说的设置还是没办法完整的抓取完  只能抓取到107美妆和喵选自营的

把每次滚屏数设置为3，采集的时候观察是否滚屏到底了，把采集的数据全部压缩上传到会员中心再导出，在excel中观察数据是否完整

我这边测试是可以采集完整的，只是有重复数据，在excel中去重就可以了