快捷导航
淘宝福建男装56一级
淘宝福建男装56二级


举报 使用道具
| 回复

共 4 个关于本帖的回复 最后回复于 2020-5-20 13:28

maomao 金牌会员 发表于 2020-5-18 21:46:18 | 显示全部楼层
第二级规则,要给抓取内容尽量做上定位标志映射,提高规则适应性。比如给商品的标题做上定位标志映射。 定位标志映射福建.png




另外,你没有勾下载图片,这样只采集到了图片的链接。没有下载到图片。看这个教程的3.4步:https://www.gooseeker.com/doc/article-348-1.html
举报 使用道具
abcsw0 初级会员 发表于 2020-5-19 21:06:24 | 显示全部楼层
maomao 发表于 2020-5-18 21:46
第二级规则,要给抓取内容尽量做上定位标志映射,提高规则适应性。比如给商品的标题做上定位标志映射。

今天试了下,二级采集50个网页只成功了35个
淘宝男装泉州519一  
淘宝男装泉州519二

能帮忙看下吗? 谢谢了!

举报 使用道具
Fuller 管理员 发表于 2020-5-19 23:35:07 | 显示全部楼层
abcsw0 发表于 2020-5-19 21:06
今天试了下,二级采集50个网页只成功了35个
淘宝男装泉州519一  
淘宝男装泉州519二

我看到你也做了定位标志映射,规则的适应性已经比较高了,但是有可能网页结构有多种格式。

按照这个帖子:https://www.gooseeker.com/doc/thread-13085-1-1.html ,找一条失败的线索,加载分析一下。看看哪个字段映射不上。

按照下图指示,检查一下生成的数据规则,集搜客爬虫在生成规则的时候,会自动选择一些id或者class作为定位标志,检查一下网页上有没有这些标志。可以点击“定位”按钮,选择其他偏好,避开一些没有的标志。

定位标志.png
举报 使用道具
abcsw0 初级会员 发表于 2020-5-20 13:28:12 | 显示全部楼层
Fuller 发表于 2020-5-19 23:35
我看到你也做了定位标志映射,规则的适应性已经比较高了,但是有可能网页结构有多种格式。

按照这个帖子 ...

谢谢啊
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 如何使用集搜客分词平台做社会网络图分析?
  • 关于食品安全的美国联邦法规文件的网络爬虫
  • 怎样更有效率地搜索互联网和整理知识—使用
  • 阿里巴巴外包询价网站用集搜客网络爬虫能采
  • 在限定论域的时候,为什么“任何一个”表示

热门用户

GMT+8, 2020-5-29 23:27