http://qts.cnca.cn/qts/qts/quali ... ListPublicPage.form 这个网页下面的翻页怎么实现?尝试了爬虫路线,好像没啥用。
举报 使用道具
| 回复

共 7 个关于本帖的回复 最后回复于 2018-2-24 16:48

Fuller 管理员 发表于 2018-2-24 15:46:55 | 显示全部楼层
这个网址好怪,打开以后什么都没有。怎么进入这个网页的?上级网址是什么?
举报 使用道具
Fuller 管理员 发表于 2018-2-24 15:47:46 | 显示全部楼层
这个网页是不是没有公开?翻页区截个图看看
举报 使用道具
golgo_forever 初级会员 发表于 2018-2-24 15:55:17 | 显示全部楼层
Fuller 发表于 2018-2-24 15:47
这个网页是不是没有公开?翻页区截个图看看

公开了的。 http://qts.cnca.cn/ 这里进去,右手边第9项,点击进去就是了。我在尝试连续点击
举报 使用道具
yangwenge 金牌会员 发表于 2018-2-24 16:14:41 | 显示全部楼层
本帖最后由 yangwenge 于 2018-2-24 16:18 编辑

1,用连续动作-点击,从这个页面http://qts.cnca.cn/ 点击第9项进入到列表页面,目标主题名为采集规则的主题名;
2,制作采集规则采集列表页面;
3,在采集规则中用连续动作选择下拉框选项进行翻页,可以参考《连续动作:自动选择下拉菜单采集数据》
举报 使用道具
golgo_forever 初级会员 发表于 2018-2-24 16:30:14 | 显示全部楼层
yangwenge 发表于 2018-2-24 16:14
1,用连续动作-点击,从这个页面http://qts.cnca.cn/ 点击第9项进入到列表页面,目标主题名为采集规则的主 ...

这样对不?尝试了id和class,尝试了选择和点击,都只能获取第一页20条数据。
1519460953(1).png
举报 使用道具
yangwenge 金牌会员 发表于 2018-2-24 16:36:11 | 显示全部楼层
本帖最后由 yangwenge 于 2018-2-24 16:38 编辑
golgo_forever 发表于 2018-2-24 16:30
这样对不?尝试了id和class,尝试了选择和点击,都只能获取第一页20条数据。
...

5L{~S~U5}B33M6F[ZDP3QWX.png
定位到select节点,不要定位到option节点,改成://*[@id='pageNumSelect']
举报 使用道具
golgo_forever 初级会员 发表于 2018-2-24 16:48:28 | 显示全部楼层
yangwenge 发表于 2018-2-24 16:36
定位到select节点,不要定位到option节点,改成://*[@id='pageNumSelect']

谢谢,搞定了,还要延时1秒,不然到了第2页就退出了。感谢感谢
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-3-28 20:14