本帖最后由 umsung 于 2017-10-30 18:03 编辑

测试能显示出数据,但抓取却有一项没有数据怎么办?
举报 使用道具
| 回复

共 1 个关于本帖的回复 最后回复于 2017-10-30 18:06

沙发
bowieD 金牌会员 发表于 2017-10-30 18:06:53 | 只看该作者
测试能显示出数据,但在抓取时有一项却没数据,这是因为网页结构有些细微的差别,爬虫定位不到抓取失败。
1,可以先坐上定位标志映射,精确爬虫的采集范围。
2,如果定位标志不行,就需要自定义xptah去定位抓取内容,由于很多网页结构相似,却又略微差别,可能是因为所在的节点位置不同导致的,这需要用自定义xpath定位到区块节点所有下的某个节点。
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-4-20 21:17