【启动采集前的配置】

  • 预先登陆网站:是
  • 配置打码平台:否

【运行方法】— 详见数据DIY图文教程

  • 用GS爬虫浏览器或者是安装了爬虫软件的火狐浏览器访问知乎_独立问题所有回复采集页面;
  • 输入一个或多个搜索结果网址,然后点击“获取数据”;
  • 点击“启动采集”按钮,采集完成后点击“打包”按钮,就可以下载数据了。

【常见问题】— 欢迎跟帖留言

举报 使用道具
| 回复

共 24 个关于本帖的回复 最后回复于 2022-11-30 00:19

沙发
聂思宇 初级会员 发表于 2017-4-26 10:09:52 | 只看该作者
为啥无法采集啊?
举报 使用道具
板凳
Fuller 管理员 发表于 2017-4-26 10:24:41 | 只看该作者
聂思宇 发表于 2017-4-26 10:09
为啥无法采集啊?

能详细说一下出错的现象吗?
举报 使用道具
地板
ssguoshunli 初级会员 发表于 2017-11-19 14:11:26 | 只看该作者
为什么采集过程中只能采集到第一个回答?
举报 使用道具
5#
wangyong 版主 发表于 2017-11-19 15:20:08 | 只看该作者
ssguoshunli 发表于 2017-11-19 14:11
为什么采集过程中只能采集到第一个回答?

已修改

举报 使用道具
6#
ssguoshunli 初级会员 发表于 2017-12-4 21:37:46 | 只看该作者
为什么采集问题答案时,下方有400多条答案,只采集58条就显示采集完成呢?采集不完整啊
举报 使用道具
7#
ld1425 新手上路 发表于 2018-3-26 11:23:37 | 只看该作者
https://www.zhihu.com/question/60521020
我想采集这个知乎问题下的所有300+回答, 但是搜集结果只搜了85个数据。请问怎样才能全部搜集?
举报 使用道具
8#
bowieD 金牌会员 发表于 2018-3-26 14:32:04 | 只看该作者
本帖最后由 bowieD 于 2018-3-26 14:36 编辑
ld1425 发表于 2018-3-26 11:23
https://www.zhihu.com/question/60521020
我想采集这个知乎问题下的所有300+回答, 但是搜集结果只搜了85 ...

像知乎这种瀑布流式的滚屏网页,数据比较多的话,鼠标滚轮往下滚动,内容越来越多,所占内存越来越大,比较容易中断
旗舰版有清除老数据功能,可以清除滚屏后所占用的内存,让爬虫不断执行连续动作的滚屏



举报 使用道具
9#
yaya224 新手上路 发表于 2018-7-4 15:59:41 | 只看该作者
对于知乎评论采集,为什么只有一条
举报 使用道具
10#
tuesday1 初级会员 发表于 2018-7-4 16:18:11 | 只看该作者
yaya224 发表于 2018-7-4 15:59
对于知乎评论采集,为什么只有一条

你具体用哪个快捷工具,添加的链接地址是什么?发出来,技术人员测试一下。
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 利用AI阅读和分析文本:扣子COZE记录用户反
  • 在网页片段内直观标注——以B站评论采集为
  • 利用AI阅读和分析文本:使用COZE建设游记文
  • 使用AI工具Kimi生成python代码为文本分析结
  • 苹果mac电脑安装集搜客网络爬虫软件失败的

热门用户

GMT+8, 2024-11-23 15:59