采集天猫商品评论，集搜客网络爬虫可以正常翻页数据管家会进入错误页面

王建国

采集天猫商品评论，集搜客网络爬虫可以正常翻页数据管家会进入错误页面

该怎样解决这个问题？

Fuller · 发表于 2020-7-17 15:40:06

这个规则的名字是什么？

wangyong · 发表于 2020-7-17 15:41:13

这种情况可以在翻页线索中勾上模拟点击

数据管家和爬虫软件的翻页特点不同，如果遇到翻页不成功的情况，可以在爬虫路线中勾上模拟点击，这样翻页更精确

wangyong · 发表于 2020-7-17 16:28:46

Fuller 发表于 2020-7-17 15:40
这个规则的名字是什么？

天猫商品评论采集结果

Fuller · 发表于 2020-7-17 16:47:35

数据管家采用了chrome内核，而集搜客网络爬虫采用了Firefox内核，在点击动作和其他连续动作方面，有比较大的差异。定义规则的时候，通过勾选不同的选项，观察结果是否达到预期。

目前并没有缺省勾上模拟点击，因为模拟点击对点击要求很高，每次点击的时候先要对准，容易点不准。点击位置上面有覆盖也不行

wangyong · 发表于 2020-7-17 16:57:35

Fuller 发表于 2020-7-17 16:47
数据管家采用了chrome内核，而集搜客网络爬虫采用了Firefox内核，在点击动作和其他连续动作方面，有比较大 ...

那这样的话，再用爬虫浏览器采集的话，翻页失败的可能更大了？

共 5 个关于本帖的回复最后回复于 2020-7-17 16:57

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页