1281#
aicici 初级会员 发表于 2021-9-12 16:46:33 | 只看该作者
小白,设置了时间段,只能爬取50页,看是要设置时间间隔才能爬取更多,如何设置时间间隔呢
举报 使用道具
1282#
gz51837844 管理员 发表于 2021-9-12 22:49:27 | 只看该作者
aicici 发表于 2021-9-12 16:46
小白,设置了时间段,只能爬取50页,看是要设置时间间隔才能爬取更多,如何设置时间间隔呢 ...

对于微博关键词搜索工具,比如我要采集关键词”新冠“, 9月1日至9月12日, 下图的设置, 会自动按每个小时去采集, 也就是理论上每小时最多可以采集50页



本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
1283#
gz51837844 管理员 发表于 2021-9-12 22:51:06 | 只看该作者
举报 使用道具
1284#
陈陈不忧桑 金牌会员 发表于 2021-9-13 14:18:46 | 只看该作者
我想问一下怎么爬取分省的数据呀,微博把分省的功能关闭了
举报 使用道具
1285#
gz51837844 管理员 发表于 2021-9-13 14:55:42 | 只看该作者
陈陈不忧桑 发表于 2021-9-13 14:18
我想问一下怎么爬取分省的数据呀,微博把分省的功能关闭了

以前可以通过高级搜索, 或者在网址里添加省市参数, 来实现按地区爬取。现在微博关闭了这个功能,微博工具箱目前也不支持按省爬取
举报 使用道具
1286#
EstherZzzz 新手上路 发表于 2021-10-27 10:57:01 | 只看该作者
请问多个关键词的爬取怎么总是失败啊?用逗号隔开也没有用,只爬了第一个关键词,如果直接把两个词合在一起也不行
举报 使用道具
1287#
内容分析应用 金牌会员 发表于 2021-10-27 12:01:39 | 只看该作者
理论上讲, 添加多个关键词, 每个关键词会添加1条单独对应的爬取网址, 关键词之间是互不干扰的。
你爬取失败的是哪几个关键词? 发出来我们测试下
举报 使用道具
1288#
elsieanddonut 初级会员 发表于 2021-10-29 16:29:26 | 只看该作者
请问是否可以屏蔽某些关键词呢~
举报 使用道具
1289#
Fuller 管理员 发表于 2021-10-29 16:41:49 | 只看该作者
elsieanddonut 发表于 2021-10-29 16:29
请问是否可以屏蔽某些关键词呢~

你想在搜索的时候,把含有某些关键词的博文过滤掉?

这样的过滤操作要在导出的数据中做。导出的数据是excel格式,很方便筛选和过滤
举报 使用道具
1290#
elsieanddonut 初级会员 发表于 2021-10-29 21:52:11 | 只看该作者
请问,开始显示了很多数据,但过了会儿点打包显示没有可打包数据,这种情况该怎么办~
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 利用AI阅读和分析文本:扣子COZE记录用户反
  • 在网页片段内直观标注——以B站评论采集为
  • 利用AI阅读和分析文本:使用COZE建设游记文
  • 使用AI工具Kimi生成python代码为文本分析结
  • 苹果mac电脑安装集搜客网络爬虫软件失败的

热门用户

GMT+8, 2024-11-15 12:27