快捷导航
我要做个爬虫,自动登陆某个网站后,点击下载链接自动下载里面的数据。
自动登陆还没尝试,先尝试用连续动作去点击下载文件,但是怎么不成功呢?
2018-04-13 00-52-58.jpg
举报 使用道具
| 回复

共 7 个关于本帖的回复 最后回复于 2022-2-12 10:10

dreamskyuu 新手上路 发表于 2018-4-13 00:55:53 | 显示全部楼层
我是菜鸟,求大侠支个招,在线等,急
举报 使用道具
Fuller 管理员 发表于 2018-4-13 09:26:26 | 显示全部楼层
手工点击,下载过程是怎样的?弹出一个新窗口?还是直接就提示另存还是打开?
举报 使用道具
Fuller 管理员 发表于 2018-4-13 09:26:40 | 显示全部楼层
可以把下载过程截个图看看
举报 使用道具
dreamskyuu 新手上路 发表于 2018-4-18 19:33:48 | 显示全部楼层
Fuller 发表于 2018-4-13 09:26
手工点击,下载过程是怎样的?弹出一个新窗口?还是直接就提示另存还是打开? ...

点击下载后就直接返回一个文件下载地址,该地址就直接可以下载文件了,对话框的话是浏览器询问是否保存文件的对话框
举报 使用道具
Fuller 管理员 发表于 2018-4-18 22:33:57 | 显示全部楼层
dreamskyuu 发表于 2018-4-18 19:33
点击下载后就直接返回一个文件下载地址,该地址就直接可以下载文件了,对话框的话是浏览器询问是否保存文 ...

集搜客老版本爬虫需要如下设置,新版本爬虫叫数据管家,不用设置
如果遇到是否保存文件对话框,第一次遇到的时候,勾选保存到硬盘,而不是勾选打开,并且设置成以后的操作都同样处理。对于很多类型的文件,这样设置一次以后,就不会再弹窗了。

如果还弹窗,在集搜客浏览器的右上角上有个齿轮状的按钮,点击进入到设置页面,进入到Mime那个tab,能看到有很多种类型的“不询问直接保存”,如果你不知道要下载的文件是哪种类型,那么就都点一遍。注意,有些按钮点一次要执行很久


举报 使用道具
LinDon 中级会员 发表于 2022-2-11 23:13:34 | 显示全部楼层
Fuller 发表于 2018-4-18 22:33
如果遇到是否保存文件对话框,第一次遇到的时候,勾选保存到硬盘,而不是勾选打开,并且设置成以后的操作 ...

你好,没找到小齿轮,怎么配置点击下载无需访问,如何直接下载呢?
微信截图_20220211231251.png
举报 使用道具
Fuller 管理员 发表于 2022-2-12 10:10:31 | 显示全部楼层
LinDon 发表于 2022-2-11 23:13
你好,没找到小齿轮,怎么配置点击下载无需访问,如何直接下载呢?

前面那个回答是老版本爬虫的设置,新版本不需要设置。当手工访问网页的时候,下载文件会提示存在哪里,当爬虫下载文件的时候,就不会提示,自动完成
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系
  • 知乎话题文本分词后的共词矩阵怎样引入词语

热门用户

GMT+8, 2024-2-28 20:54