有个问题,网页有130多个结果,采集不全,只有40几个下来
举报 使用道具
| 回复

共 6 个关于本帖的回复 最后回复于 2017-1-3 17:06

沙发
scraper 论坛元老 发表于 2017-1-3 17:02:18 | 只看该作者
检查和测试:
1. 规则测试当前页面是否能抓全
2. 是否有多个字段勾选了“key”
3. 运行抓取时是否页面还没加载全就执行了抓取
举报 使用道具
板凳
丁道师 中级会员 发表于 2017-1-3 17:03:06 | 只看该作者
scraper 发表于 2017-1-3 17:02
检查和测试:
1. 规则测试当前页面是否能抓全
2. 是否有多个字段勾选了“key”

我全部点了key。。。
举报 使用道具
地板
scraper 论坛元老 发表于 2017-1-3 17:03:31 | 只看该作者
丁道师 发表于 2017-1-3 17:03
我全部点了key。。。

有些记录不是每个字段都有的
举报 使用道具
5#
丁道师 中级会员 发表于 2017-1-3 17:04:21 | 只看该作者
scraper 发表于 2017-1-3 17:03
有些记录不是每个字段都有的

那点哪些
存在没有的就不点key是吧
举报 使用道具
6#
scraper 论坛元老 发表于 2017-1-3 17:05:54 | 只看该作者
丁道师 发表于 2017-1-3 17:04
那点哪些
存在没有的就不点key是吧

你自己判断, 页面上哪个字段是一定会出现的, 这个字段勾选key
其它的不要勾选

举报 使用道具
7#
丁道师 中级会员 发表于 2017-1-3 17:06:03 | 只看该作者
scraper 发表于 2017-1-3 17:05
你自己判断, 页面上哪个字段是一定会出现的, 这个字段勾选key
其它的不要勾选

好的
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 运行Apple无法验证的程序的方法
  • 文本聚类分析软件的安装和使用方法
  • 利用AI阅读和分析文本:扣子COZE记录用户反
  • 在网页片段内直观标注——以B站评论采集为
  • 利用AI阅读和分析文本:使用COZE建设游记文

热门用户

GMT+8, 2024-12-24 01:35