本帖最后由 MebiuW 于 2016-11-3 17:51 编辑

A页面是列表,列表包含姓名信息,点击“查看详情”会弹出页面显示更多信息,但是这个弹出来的页面是没有姓名的,所以我要采集 列表的姓名+详情页的更多信息如地址等,这样子怎么采集?不知道2个页面是否可以同时采集?
举报 使用道具
| 回复

共 2 个关于本帖的回复 最后回复于 2016-11-3 17:58

沙发
ym 版主 发表于 2016-11-3 17:56:39 | 只看该作者
本帖最后由 ym 于 2016-11-3 17:58 编辑

首先要分析一下“查看详情”是否有独立链接指向对应的详情页,分为下面两种情况去解决:
1、有独立网址,这个就好办了,把网址抓下来,做层级采集,通过网址关联下级页面采详情数据,这种方法就是先采列表页,再采详情页了。具体操作参考《采网址做层级采集》
2、没有独立网址,要用到飞掠模式功能,可以两个页面同时采集,通过模拟鼠标的点击动作,逐个点击“查看详情”,采完详情页数据后,再点击下一个按钮,采下一个详情页数据。操作参考《飞掠模式:追踪弹窗采数据》
举报 使用道具
板凳
MebiuW 初级会员 发表于 2016-11-3 17:58:42 | 只看该作者
我先试试,谢啦
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-5-3 23:41