我想在百度地图开放平台上的坐标拾取器上采集地址的坐标。发现每个地址总是有2个XML文件,采下来的数据是一样的,仔细看才发现第二个文件做了个我没有设置的动作。


当我再用打数机爬一次的时候,发现页面会出现我手动查询时没有的东西。

当我手动查询时,我在上面输入地址,地图会切换,但是复制旁边的文本框是空白的,要我点击地图或者右边的地址文本框才会出现坐标。我也是第一次看到这样的提示。
虽然总体上不影响数据采集,但是要在Excel去掉那么多重复项。很烦。

请手动复制2.png (826.53 KB, 下载次数: 557)

请手动复制2.png

请手动复制1.png (498.93 KB, 下载次数: 579)

请手动复制1.png

复制.JPG (135.57 KB, 下载次数: 563)

复制.JPG

百度一下.JPG (139.03 KB, 下载次数: 550)

百度一下.JPG
举报 使用道具
| 回复

共 2 个关于本帖的回复 最后回复于 2017-11-13 16:18

沙发
yangwenge 金牌会员 发表于 2017-11-13 16:15:50 | 只看该作者
第二个动作的xpath写的有点问题

定位到了两个按钮的节点,将复制的节点也定位到了,需要修改成只定位到搜索按钮的节点。
可以修改为://*[@id='localsearch']
举报 使用道具
板凳
umsung 高级会员 发表于 2017-11-13 16:18:46 | 只看该作者
爬虫会自动点击复制?是不是你的xptah会定位到复制按钮?把xptah换成唯一的试试。
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-4-23 23:47