如果在微博上抓数据,选取一个关键词“上海疫情”,然后想抓取的时间段是1年(2021年1月-2021年12月)。觉得数据量太大,想要每天抓取50条信息就行,怎么设置这个每天抓取的信息条数呢?谢谢!【我已经把细分时间粒度选了1天了,但是每天抓的数据也有200多条,整个我感觉太多,导致抓的速度太慢了。还有没有别的限制条数的办法呢?】


非常感谢,非常感谢!
举报 使用道具
| 回复

共 3 个关于本帖的回复 最后回复于 2022-12-5 15:10

沙发
gz51837844 管理员 发表于 2022-12-2 19:44:31 | 只看该作者
目前微博工具箱里的微博关键词搜索工具没有提供自定义翻页数,如果需要自定义翻页数,可以试试这个快捷采集:微博关键词搜索结果采集
旗舰版用户也可以在技术交流群里联系管理员,单独为你修改微博工具箱里的微博关键词搜索工具的翻页数。




举报 使用道具
板凳
scdscdscd12345 初级会员 发表于 2022-12-4 22:39:04 | 只看该作者
好的, 谢谢!我想再问下以关键词检索到的内容,感觉更多是官方认证或者自媒体发布的内容在实时里当时应该是有更多普通用户发言的,爬不到是被清掉了嘛?就爬到的大部分都是官方的评论,个人用户的很少很少,这种怎么办呀~求解答,谢谢吖~
举报 使用道具
地板
gz51837844 管理员 发表于 2022-12-5 15:10:14 | 只看该作者
scdscdscd12345 发表于 2022-12-4 22:39
好的, 谢谢!我想再问下以关键词检索到的内容,感觉更多是官方认证或者自媒体发布的内容在实时里当时应该 ...

微博网站提供的高级搜索选项,在使用微博工具箱的微博关键词工具时也可以选择,比如选择搜索类型是“原创”或者其它类型的

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 话题分析(NMF模型和LDA模型)软件的安装和
  • 运行Apple无法验证的程序的方法
  • 文本聚类分析软件的安装和使用方法
  • 利用AI阅读和分析文本:扣子COZE记录用户反
  • 在网页片段内直观标注——以B站评论采集为

热门用户

GMT+8, 2025-1-21 12:10