主题名;casualdress
举报 使用道具
| 回复

共 3 个关于本帖的回复 最后回复于 2017-8-16 11:35

沙发
shengchengx 金牌会员 发表于 2017-8-16 11:09:20 | 只看该作者
出什么问题了?
举报 使用道具
板凳
Fuller 管理员 发表于 2017-8-16 11:16:23 | 只看该作者
1,整理箱中ad这个抓取内容,跟其他的抓取内容不是在同一个商品上做映射,这个本来是不允许的。如果第一个商品没有ad,应该用自定义xpath做定位规则
2,可能是因为这个ad的原因,点击“爬数据”后,显示匹配失败。但是如果把DS打数机左边的主题列表隐掉以后,就能爬取成功,可能是窄屏的时候商品排列的规律不一样
3,我把翻页规则调整了一下,用span做定位映射,这样相当于把翻页区规定的很小,更加精准,只是适应性差一下。更精准的话,可以限制爬虫只点击span,而不是点击更大范围的a

举报 使用道具
地板
yogurt 新手上路 发表于 2017-8-16 11:35:35 | 只看该作者
好的 ,那我把ad用自定义xpath做定位规则,还有如何把DS打数机左边的主题列表隐掉
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-4-25 18:48