规则名:M跟团游1
在DS打数机上抓取数据翻页到14页,显示如图,


随后就自动停止数据抓取,实际后边还有近100页数据未采集。

Chrome翻页到14页,显示如图Chrome,有后续页面和next记号,

请问这个如何解决?

Chrome.PNG (4.51 KB, 下载次数: 437)

Chrome

Chrome
举报 使用道具
| 回复

共 7 个关于本帖的回复 最后回复于 2018-7-25 17:24

沙发
Arie-X 中级会员 发表于 2018-7-25 12:43:42 | 只看该作者
加载你的规则,用规则中的样本页面做实验,不管是chrome还是火狐,都是只能到13页,你截图的网页网址是什么?
举报 使用道具
板凳
CaptainZ 初级会员 发表于 2018-7-25 13:22:38 | 只看该作者
Arie-X 发表于 2018-7-25 12:43
加载你的规则,用规则中的样本页面做实验,不管是chrome还是火狐,都是只能到13页,你截图的网页网址是什么 ...

网址是这个
http://www.mafengwo.cn/sales/0-0-M10189-0-0-0-0-0.html?group=4&seid=A4B7668C-A6AD-4828-9E10-566324A38E6F
举报 使用道具
地板
Arie-X 中级会员 发表于 2018-7-25 14:42:49 | 只看该作者
CaptainZ 发表于 2018-7-25 13:22
网址是这个
http://www.mafengwo.cn/sales/0-0-M10189-0-0-0-0-0.html?group=4&seid=A4B7668C-A6AD-4828- ...

我在chrome下看也还是只有12页,是不是要登录才能看到更多?你在chrome下是怎样看到超过12页的?
举报 使用道具
5#
CaptainZ 初级会员 发表于 2018-7-25 16:01:28 | 只看该作者
Arie-X 发表于 2018-7-25 14:42
我在chrome下看也还是只有12页,是不是要登录才能看到更多?你在chrome下是怎样看到超过12页的?
...

我没有登录马蜂窝的账号,我打开任意浏览器都是能够查看100余页,参见图:页数
是否是因为你的默认出发点是具体某个城市(北京、上海.........),我输入的是全国,参见图:全国出发

全国出发.PNG (45.17 KB, 下载次数: 452)

全国出发.PNG

页数.PNG (104.35 KB, 下载次数: 467)

页数.PNG
举报 使用道具
6#
Fuller 管理员 发表于 2018-7-25 16:24:30 | 只看该作者
CaptainZ 发表于 2018-7-25 16:01
我没有登录马蜂窝的账号,我打开任意浏览器都是能够查看100余页,参见图:页数
是否是因为你的默认出发点 ...

是的,是跟出发地有关,如果改成全国,就能搜到很多。用集搜客浏览器也是能看到很多翻页。

我设置了“全国”以后,虽然网址变化了,我发现把这个网址拷贝到另一个浏览器窗口的时候,再次变成了我所在的城市。看来这个网址是短暂有效的。这样的话,你得再做一个规则,放在这个规则之前执行,新做的规则用两个点击动作,动作1点开选择城市的菜单,动作2,点击“全国”,动作执行以后,目标主题指向你现有的这个规则。这样做了以后,从新规则开始执行,就能先选择全国,再执行抓取
举报 使用道具
7#
CaptainZ 初级会员 发表于 2018-7-25 16:45:37 | 只看该作者
Fuller 发表于 2018-7-25 16:24
是的,是跟出发地有关,如果改成全国,就能搜到很多。用集搜客浏览器也是能看到很多翻页。

我设置了“全 ...

听起来可行也很酷,不过你说的“再做一个规则,……新做的规则用两个点击动作,动作1点开选择城市的菜单,动作2,点击“全国”,”,两个动作是在一个新的主题名下建立规则么?然后点开和点击动作怎么设置呢?是否有类似的帖子或者教程可以作为参考呢?
举报 使用道具
8#
Fuller 管理员 发表于 2018-7-25 17:24:27 | 只看该作者
CaptainZ 发表于 2018-7-25 16:45
听起来可行也很酷,不过你说的“再做一个规则,……新做的规则用两个点击动作,动作1点开选择城市的菜单 ...

要用新主题名建立一个规则。定义点击动作的教程参看:https://www.gooseeker.com/doc/article-288-1.html
连续动作的教程很多,都放在高级教程里面,展开左栏目录就能看到:https://www.gooseeker.com/tuto/tutorial.html
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-4-26 18:14