你好,我想请问一下,我还是在采集微博的评论和转发,对人民日报的一则新闻做采集的时候,无论试了几次,评论那边都会打数机都会中途结束,显示数据已采集完毕,但是打包的时候里面只有几条评论(正常该条微博里有两千多条评论),这个问题要怎么解决?


举报 使用道具
| 回复

共 1 个关于本帖的回复 最后回复于 2017-4-21 17:34

沙发
shengchengx 金牌会员 发表于 2017-4-21 17:34:13 | 只看该作者
评论和转发采集的时候一定要确保网速,万一中间翻页失败,就断掉了,只能从头开始,因为每个分页没有独立的网址
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-4-26 01:32