21#
shenzhenwan10 金牌会员 发表于 2017-4-27 19:30:17 | 只看该作者
要完整采集知乎用户的详情, 需要先点击一下"查看详细资料"
似乎知乎近期有改版, 造成点击动作失效了, 所以有些属性没有采集到
现在已经修改好了, 你可以重新添加再试试
举报 使用道具
22#
聂思宇 初级会员 发表于 2017-4-27 20:25:05 | 只看该作者
shenzhenwan10 发表于 2017-4-27 19:30
要完整采集知乎用户的详情, 需要先点击一下"查看详细资料"
似乎知乎近期有改版, 造成点击动作失效了, 所以 ...

您好~可是现在无法打包数据啊


本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
23#
gz51837844 管理员 发表于 2017-4-27 20:29:50 | 只看该作者
你要新添加任务, 启动采集
举报 使用道具
24#
聂思宇 初级会员 发表于 2017-4-27 20:42:05 | 只看该作者
gz51837844 发表于 2017-4-27 20:29
你要新添加任务, 启动采集

刚刚好像是我弄错了,抱歉啊~
举报 使用道具
25#
聂思宇 初级会员 发表于 2017-4-28 18:48:59 | 只看该作者
HJLing 发表于 2017-4-26 11:13
是 改好了测试没问题再告知您

您好~我还想问一下啊,我搜集知乎某问题下所有回答时,问题明明显示有1600多条回答,可为什么我每次只能搜集到500多条回答呢?
举报 使用道具
26#
Fuller 管理员 发表于 2017-4-28 22:05:27 | 只看该作者
聂思宇 发表于 2017-4-28 18:48
您好~我还想问一下啊,我搜集知乎某问题下所有回答时,问题明明显示有1600多条回答,可为什么我每次只能 ...

原因可能是两个:
1,知乎回答的显示方式是瀑布流式的,不是分页的,往下拉滚动条的时候,更多内容加载上来,加载多了,网页就会很大,速度会很慢,很可能在500条以后,网页太慢了,抓取超时了。要看看DS打数机的窗口下部日志窗口中是什么内容。如果日志窗口收缩了,点击下边沿中部往下拉,就能展开。

2,在数据DIY页面上输入网址的时候,要设定翻页数量。不过没有500这个数字,所以,上一种情况可能性更大
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 利用AI阅读和分析文本:扣子COZE记录用户反
  • 在网页片段内直观标注——以B站评论采集为
  • 利用AI阅读和分析文本:使用COZE建设游记文
  • 使用AI工具Kimi生成python代码为文本分析结
  • 苹果mac电脑安装集搜客网络爬虫软件失败的

热门用户

GMT+8, 2024-11-23 04:38