21#
yogawang 初级会员 发表于 2017-7-25 16:10:43 | 只看该作者
Fuller 发表于 2016-10-29 15:47
可以把具体网址贴出来,我们帮你诊断。

原则上,能看到的图片都是可以下载的,因为在浏览器上能看到的话, ...

https://www.amazon.com/Nike-Womens-Running-Shoes-Black/dp/B0098SKFQ4/ref=sr_1_1?s=apparel&ie=UTF8&qid=1500604765&sr=1-1&nodeID=679255011&psd=1&refinements=p_89%3ANIKE%2Cp_8%3A2661607011&th=1&psc=1
通过连续动作抓取页面的,每次都是前面两个动作能抓取到大图,后面的都抓取不到了,这是怎么回事呀?

举报 使用道具
22#
wangyong 版主 发表于 2017-7-25 16:14:42 | 只看该作者
规则名是什么?
举报 使用道具
23#
yogawang 初级会员 发表于 2017-7-25 17:34:22 | 只看该作者

nike_shoes_70percent_detail_before
nike_shoes_70percent_detail_after
举报 使用道具
24#
wangyong 版主 发表于 2017-7-25 18:19:36 | 只看该作者
规则里是指抓每个商品的第一个图片的
你指的大图、小图链接分别是什么
举报 使用道具
25#
yogawang 初级会员 发表于 2017-7-26 10:21:14 | 只看该作者
本帖最后由 yogawang 于 2017-7-26 10:27 编辑
wangyong 发表于 2017-7-25 18:19
规则里是指抓每个商品的第一个图片的
你指的大图、小图链接分别是什么

nike_shoes_70percent_detail_after 的 image_src(大图链接) 就是每个商品的第一张图片,每次执行连续动作都抓取一次(就连续动作的前面一两次能取到图片和链接),  小图抓取的时候没有问题不过小图太小了,没有抓

举报 使用道具
26#
wangyong 版主 发表于 2017-7-26 14:16:12 | 只看该作者

这个是大图的网址,你抓的小图网址是什么?
举报 使用道具
27#
yogawang 初级会员 发表于 2017-7-27 10:21:15 | 只看该作者
本帖最后由 yogawang 于 2017-7-27 10:40 编辑
wangyong 发表于 2017-7-26 14:16
这个是大图的网址,你抓的小图网址是什么?


小图链接在color标签上,我在规则里加回去了(small_image_src)

下载小图是正常的,大图却只有第一个才有

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
28#
wangyong 版主 发表于 2017-7-27 14:17:55 | 只看该作者
yogawang 发表于 2017-7-27 10:21
小图链接在color标签上,我在规则里加回去了(small_image_src)

下载小图是正常的,大图却只有第一个才 ...

现在的采集规则只做了第一张图的映射,要采集所有的大图需要每张大图都做内容映射,或者对大图做样例复制映射
举报 使用道具
29#
yogawang 初级会员 发表于 2017-7-27 16:04:23 | 只看该作者
wangyong 发表于 2017-7-27 14:17
现在的采集规则只做了第一张图的映射,要采集所有的大图需要每张大图都做内容映射,或者对大图做样例复制 ...

我要的是每种颜色的第一张大图,可是连续动作选择下一个颜色后就取不到大图的图片链接了
举报 使用道具
30#
wangyong 版主 发表于 2017-7-27 16:06:46 | 只看该作者
yogawang 发表于 2017-7-27 16:04
我要的是每种颜色的第一张大图,可是连续动作选择下一个颜色后就取不到大图的图片链接了
...

检查动作后的页面和动作前的页面有什么区别,对应修改规则
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 利用AI阅读和分析文本:扣子COZE记录用户反
  • 在网页片段内直观标注——以B站评论采集为
  • 利用AI阅读和分析文本:使用COZE建设游记文
  • 使用AI工具Kimi生成python代码为文本分析结
  • 苹果mac电脑安装集搜客网络爬虫软件失败的

热门用户

GMT+8, 2024-11-22 14:09