现有问题:
1. 一级列表规则按教程配置后,点击规则测试,提示:因为前面的原因生成的抓取规则文件是空的,跳过”;
2.  DS打数机抓取时,一级规则爬取无法翻页、并且本地查找不到一级规则的爬取的数据
二级、三级单独单搜结果,本地能查到,但数据结果只有一条记录;

主要实现:
1. 一级列表自动翻页+链接下级线索    规则名:阿里巴巴联系方式数据抓取
2. 二级链接一级列表+链接下级线索    规则名:阿里巴巴一级采集规则
3. 三级链接二级链接,并抓取数据;   规则名:阿里巴巴三级采集规则

求大神解答!







举报 使用道具
| 回复

共 5 个关于本帖的回复 最后回复于 2017-7-19 23:42

沙发
Fuller 管理员 发表于 2017-7-19 20:07:38 | 只看该作者
加载第一级规则就出现异常,估计是规则保存的时候出异常了,只能重新做这个规则了

paul1.png (3.64 KB, 下载次数: 587)

paul1.png
举报 使用道具
板凳
paulchoy 新手上路 发表于 2017-7-19 21:00:54 | 只看该作者
确定没办法修复吗
举报 使用道具
地板
paulchoy 新手上路 发表于 2017-7-19 21:41:30 | 只看该作者
Fuller 发表于 2017-7-19 20:07
加载第一级规则就出现异常,估计是规则保存的时候出异常了,只能重新做这个规则了
...

确定没办法修复吗
举报 使用道具
5#
Fuller 管理员 发表于 2017-7-19 22:12:32 | 只看该作者
paulchoy 发表于 2017-7-19 21:41
确定没办法修复吗

是的,加载不了,你加载一下试一试。
举报 使用道具
6#
paulchoy 新手上路 发表于 2017-7-19 23:42:13 | 只看该作者
Fuller 发表于 2017-7-19 22:12
是的,加载不了,你加载一下试一试。

已经找到问题了:是复制映射没做好,导致无法新建文件;另外优化了下爬取流程,减少到2个规则搞定。
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-5-2 23:19