关于豆瓣电影影评展开采集的问题

weightminwu 发表于 2019-2-21 17:55
有放大，看着他展开第一条评论采集，然后直接跳过第二条，点开第三条评论采集，然后就跳进评论链接了
...

你是mac版还是windows版？

Fuller 发表于 2019-2-21 20:17
你是mac版还是windows版？

Windows的

weightminwu 发表于 2019-2-21 21:37
Windows的

我看xpath没有问题，很可能是在你的电脑上点击不准，在高级设置那里不要勾模拟点击


本来模拟点击是为了更加像人工点击，是根据屏幕位置点击的，但是可能在你的电脑上定位不准，我测试了，这个网页不用模拟点击也可以

Fuller 发表于 2019-2-22 08:50
我看xpath没有问题，很可能是在你的电脑上点击不准，在高级设置那里不要勾模拟点击

谢谢！这个问题解决了！
但是我想加个翻页操作，在美人鱼yu2加了个爬虫设置：

然后他就变成了只采集每页的第一条评论，这个怎么解决？？

你好，还在吗？怎么解决这个翻页问题呀...
现在是展开采集了第一条数据就翻页了，怎么做到展开一页中的全部信息采集完成后再翻页？？？

我找到办法了，批量添加线索就可以了

集搜客现在有豆瓣快捷采集工具，下载爬虫软件后，用爬虫浏览器打开这个网页https://www.gooseeker.com/res/datadiy.html?category=%E7%A4%BE%E4%BA%A4&web=%E8%B1%86%E7%93%A3，输入网址，即可以采集豆瓣影评，豆瓣书评。