10 12511

爬取不了原创微博?了

xinzhe 于 2021-5-12 12:13 发表 [复制链接]
现在用工具箱是无法爬取原创微博吗?
举报 使用道具
| 回复

共 10 个关于本帖的回复 最后回复于 2021-5-13 10:28

内容分析应用 金牌会员 发表于 2021-5-12 15:32:09 | 显示全部楼层
微博工具箱微博快捷采集里有多种微博采集应用, 你可以试试
举报 使用道具
maomao 论坛元老 发表于 2021-5-12 18:45:48 | 显示全部楼层
参考这个帖子  如何使用微博工具箱-以采集微博关键词搜索结果为例,在关键词工具的高级设置里,勾选“原创”。
或者在微博网站上对关键词进行高级搜索,勾选原创,然后把链接添加到关键词快捷工具



举报 使用道具
xinzhe 初级会员 发表于 2021-5-12 23:47:07 | 显示全部楼层
你好 是选择了但是还是爬取的是全部博文不是原创博文
举报 使用道具
Fuller 管理员 发表于 2021-5-13 07:42:32 | 显示全部楼层
xinzhe 发表于 2021-5-12 23:47
你好 是选择了但是还是爬取的是全部博文不是原创博文

首先在微博上选择原创,如下图
原创20210513074043.png

然后把网址拷贝到微博采集工具箱,并且这样选择
工具20210513074211.png
举报 使用道具
xinzhe 初级会员 发表于 2021-5-13 08:13:26 | 显示全部楼层
Fuller 发表于 2021-5-13 07:42
首先在微博上选择原创,如下图

那现在是用不了关键词搜索原创博文?

举报 使用道具
Fuller 管理员 发表于 2021-5-13 09:01:07 | 显示全部楼层
xinzhe 发表于 2021-5-13 08:13
那现在是用不了关键词搜索原创博文?

锌粉20210513090030.png
要这样设置细分条件
举报 使用道具
xinzhe 初级会员 发表于 2021-5-13 10:03:04 | 显示全部楼层
我设置了可是搜索页面显示的还是全部 没有原创
举报 使用道具
xinzhe 初级会员 发表于 2021-5-13 10:04:47 | 显示全部楼层
你可以试一下吗是不是需要重装一下?
举报 使用道具
Fuller 管理员 发表于 2021-5-13 10:21:37 | 显示全部楼层
xinzhe 发表于 2021-5-13 10:04
你可以试一下吗是不是需要重装一下?

我刚才测试了,搜索出来的确实都是原创。当爬虫运行的时候,你观察一下爬虫加载出来的网页内容,是不是原创
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-3-29 06:22