就是我需要爬取很多个项目的对应的所有讨论板块内的讨论帖的评论内容,总共要给每个项目做三层嵌套规则。
目前有每个项目的网站链接每个项目都是一样的规则
请问有什么办法可以直接执行批量项目的爬取,而不是我每个项目都要做一遍规则,都进行一次爬取呢?

下图是一个项目的三层爬取

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
| 回复

共 3 个关于本帖的回复 最后回复于 2023-5-18 12:25

Fuller 管理员 发表于 2023-5-17 15:16:58 | 显示全部楼层
给规则中添加不同项目的链接,就可以了,看这个教程https://www.gooseeker.com/doc/article-526-1.html
举报 使用道具
Fuller 管理员 发表于 2023-5-17 15:17:55 | 显示全部楼层
如果每个项目的网页结构是一样的,那么在第一级规则中加入其他项目的网址

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
zeng111 初级会员 发表于 2023-5-18 12:25:24 | 显示全部楼层
Fuller 发表于 2023-5-17 15:17
如果每个项目的网页结构是一样的,那么在第一级规则中加入其他项目的网址

...

好的谢谢已解决
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 苹果mac电脑安装集搜客网络爬虫软件失败的
  • 下载支持win7的集搜客网络爬虫软件
  • 遇到“无法识别的应用”告警怎么办?
  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词

热门用户

GMT+8, 2024-7-23 01:10