集搜客GooSeeker网络爬虫

标题: 使用gooseeker抓取数据设置了翻页,抓取的数据全是第一页的数据 [打印本页]

作者: zlstovd    时间: 2020-2-21 14:02
标题: 使用gooseeker抓取数据设置了翻页,抓取的数据全是第一页的数据
设置如图,求大佬帮忙看看呢

作者: maomao    时间: 2020-2-21 14:16
把连续翻页后面的模拟点击去掉。
[attach]11819[/attach]

作者: Fuller    时间: 2020-2-21 14:51
通常不要勾“模拟点击”,模拟点击就像仿真人的点击一样,有一些约束:
1,如果执行点击的时候,“下一页”这个位置没有在当前屏幕的话,爬虫会试图自动滚动到这个位置,万一滚动不成,就会点击失败
2,如果这个位置上覆盖了其他内容,鼠标也点击不上

有些网页不够“模拟点击”就不能翻页,所以,先试没有模拟点击,不行再勾上模拟点击




欢迎光临 集搜客GooSeeker网络爬虫 (https://www.gooseeker.com/doc/) Powered by Discuz! X3.2