主题名;casualdress
举报 使用道具
| 回复

共 3 个关于本帖的回复 最后回复于 2017-8-16 11:35

沙发
shengchengx 金牌会员 发表于 2017-8-16 11:09:20 | 只看该作者
出什么问题了?
举报 使用道具
板凳
Fuller 管理员 发表于 2017-8-16 11:16:23 | 只看该作者
1,整理箱中ad这个抓取内容,跟其他的抓取内容不是在同一个商品上做映射,这个本来是不允许的。如果第一个商品没有ad,应该用自定义xpath做定位规则
2,可能是因为这个ad的原因,点击“爬数据”后,显示匹配失败。但是如果把DS打数机左边的主题列表隐掉以后,就能爬取成功,可能是窄屏的时候商品排列的规律不一样
3,我把翻页规则调整了一下,用span做定位映射,这样相当于把翻页区规定的很小,更加精准,只是适应性差一下。更精准的话,可以限制爬虫只点击span,而不是点击更大范围的a

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
地板
yogurt 新手上路 发表于 2017-8-16 11:35:35 | 只看该作者
好的 ,那我把ad用自定义xpath做定位规则,还有如何把DS打数机左边的主题列表隐掉
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 利用AI阅读和分析文本:扣子COZE记录用户反
  • 在网页片段内直观标注——以B站评论采集为
  • 利用AI阅读和分析文本:使用COZE建设游记文
  • 使用AI工具Kimi生成python代码为文本分析结
  • 苹果mac电脑安装集搜客网络爬虫软件失败的

热门用户

GMT+8, 2024-11-25 14:51