规则名:虎扑搜索帖子具体内容

翻页到第二页但是第二页的内容无法抓取,然后很多帖子的抓取都失败了,求问是什么情况,谢谢。


举报 使用道具
| 回复

共 5 个关于本帖的回复 最后回复于 2020-10-26 18:46

沙发
wangyong 版主 发表于 2020-10-26 17:14:27 | 只看该作者
因为第一页和第二页的网页结构略有不同,需要在规则上再做上定位标志映射:https://www.gooseeker.com/doc/article-344-1.html

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
板凳
Beausu 中级会员 发表于 2020-10-26 17:33:24 | 只看该作者
感谢~
举报 使用道具
地板
Beausu 中级会员 发表于 2020-10-26 18:07:21 | 只看该作者
您好 我按照这个将评论区里需要样例复制的内容做了定位标志映射,但还是出现同样的情况,能麻烦您看一下是什么原因吗,是我的映射节点找的不对吗,谢谢
举报 使用道具
5#
Fuller 管理员 发表于 2020-10-26 18:44:36 | 只看该作者
Beausu 发表于 2020-10-26 18:07
您好 我按照这个将评论区里需要样例复制的内容做了定位标志映射,但还是出现同样的情况,能麻烦您看一下是 ...



因为每条评论都有唯一的id,所以,做了定位标志映射以后,要做修改,不用使用id。双击抓取内容,进入到抓取内容高级设置选项,勾上 class

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
6#
wangyong 版主 发表于 2020-10-26 18:46:23 | 只看该作者
Beausu 发表于 2020-10-26 18:07
您好 我按照这个将评论区里需要样例复制的内容做了定位标志映射,但还是出现同样的情况,能麻烦您看一下是 ...


需要选中包含整个抓取内容的节点,给整理箱顶节点做上定位标志映射

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 360或火绒等杀毒软件导致GooSeeker爬虫软件
  • 话题分析(NMF模型和LDA模型)软件的安装和
  • 运行Apple无法验证的程序的方法
  • 文本聚类分析软件的安装和使用方法
  • 利用AI阅读和分析文本:扣子COZE记录用户反

热门用户

GMT+8, 2025-4-21 12:50