只能爬到一页的内容，不知什么原因

设置了模拟点击爬取中国大学慕课里某门课的讨论区内容，但只能抓到第一页的内容，找不到原因，求帮助！任务么是Dclick1 和Dclick2.

第一级规则没有设置关键内容，那么就没有判断规则是否适合的依据，很容易抓取失败，或者漏数据，至少给一个抓取内容设置关键内容

第一级规则的样本网址：https://www.icourse163.org/learn ... 257#/learn/announce
第二级规则的样本网址：https://www.icourse163.org/learn ... 7#/learn/forumindex

很明显，各自有不同的独立网址，根本不需要做两级，只需要第二级规则就行了，看这个网址名字，估计所有课程都有类似的网址结构，最后都是 forumindex 表示论坛网页。那么可以在excel中批量把网址构造好

第二级规则加载失败，是翻页规则失败。要注意蓝色箭头，class中含有一串数字，这种数字往往每一页都不一样，所以，要避开它，这个div不能用做翻页区，因为id和class都不能用。那么就选用含有“下一页”的那个A节点作为翻页区。另外，点击定位偏好按钮，选择偏好class，因为很多id都含有数字，会影响适应性。

最后，在创建规则工作台上，勾上关键内容，不然的话，翻页采集容易漏数据

好的  非常感谢

您好，就按第二级规则，设了关键内容，还是只能抓一页的内容，TestDis

zhaopeng123161 发表于 2020-1-7 21:53
您好，就按第二级规则，设了关键内容，还是只能抓一页的内容，TestDis

看我在“地板”楼的回答，按照我说的做翻页区映射和翻页记号映射

非常感谢指导， 已成功！