在利用二级规则专门下载附件链接时,不同规则中下载的附件总是都一起下载到在下载历史定义的目录中,如何让不同规则爬取的附件自动放到各自的文件夹中?
举报 使用道具
| 回复

共 1 个关于本帖的回复 最后回复于 2019-5-17 09:23

Fuller 管理员 发表于 2019-5-17 09:23:35 | 显示全部楼层
如果每个附件都有独立链接的话,那么可以用这个方法《用网络爬虫软件自动下载网页上的文件》。这样的下载位置是可控的,具体参看《新版集搜客网络爬虫图片下载功能》。

如果每个附件没有对应的网址,都是点击的时候才能开始下载,那么就得对这个点击位置定义点击动作,这种下载位置是不可控的,都放在集搜客浏览器上配置的下载目录中。这种情况下,不要多个爬虫群窗口并行运行,否则不知道一个下载文件是哪个窗口下载的
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-3-28 22:52