本帖最后由 xmd555 于 2019-6-27 11:54 编辑

经过昨天的指点,现在已经可以了,我重新弄了两个,都正常
但是采集二级的时候出现如下图:


---

我现在新的规则是:

举报 使用道具
| 回复

共 3 个关于本帖的回复 最后回复于 2019-6-27 11:55

沙发
xmd555 初级会员 发表于 2019-6-27 10:49:22 | 只看该作者
而且我感觉,这个爬虫好像不是按照顺序采集。
举报 使用道具
板凳
Fuller 管理员 发表于 2019-6-27 11:10:32 | 只看该作者
xmd555 发表于 2019-6-27 10:49
而且我感觉,这个爬虫好像不是按照顺序采集。

首先,不一定按照顺序采集。假设你第二级有很多线索,线索基本上是按照添加的先后顺序排序的,但是并不确保是排序的。
其次,第二级出现很多失败,一般来说是你没有采用定位标志映射,那么网页结构的稍微变化都会导致规则失效。定位标志映射的方法参看:http://www.gooseeker.com/doc/article-344-1.html

如果在DS打数机上看到了失败的日志,那么记录下来线索编号,按照这个方法分析失败的原因:https://www.gooseeker.com/doc/article-272-1.html
要在MS谋数台上做这个加载分析工作
举报 使用道具
地板
xmd555 初级会员 发表于 2019-6-27 11:55:16 | 只看该作者
Fuller 发表于 2019-6-27 11:10
首先,不一定按照顺序采集。假设你第二级有很多线索,线索基本上是按照添加的先后顺序排序的,但是并不确 ...

谢谢指点,
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-4-25 15:25