集搜客GooSeeker网络爬虫

标题: 微博采集工具箱能爬取新版微博内容吗? [打印本页]

作者: 发誓学好内容分析    时间: 2021-6-1 16:53
标题: 微博采集工具箱能爬取新版微博内容吗?
我把微博切换到新版微博了,我用GooSeeker微博采集工具箱采集数据的时候发现都失败了。不能用新版微博吗?怎么切换到老版微博?GooSeeker采集工具箱什么时候支持新版微博?

作者: halo6939    时间: 2021-7-7 19:56
没有这个选项呢
作者: Fuller    时间: 2021-7-7 20:03
halo6939 发表于 2021-7-7 19:56
没有这个选项呢

新版微博:顶部一条按钮没有文字,只有图案
旧版微博:顶部一条按钮既有文字也有图案


作者: halo6939    时间: 2021-7-7 20:27
你好,我想问一下采集完的数据在哪里导出呀,在页面上没有找到呢
作者: Fuller    时间: 2021-7-7 23:09
halo6939 发表于 2021-7-7 20:27
你好,我想问一下采集完的数据在哪里导出呀,在页面上没有找到呢

一共有三类采集任务,他们导出数据的地方不一样

第一类:微博采集工具箱
微博采集工具箱有自己的界面,要在自己的界面中导出,包括如下工具:
1,微博博主主页采集工具
2,微博关键词搜索结果采集工具
3,微博转发和评论内容采集工具
4,微博热门话题采集工具
5,微博分词和关注者资料采集工具
6,微博博主详细信息采集工具

第二类:快捷采集
快捷采集界面上添加了网址以后,会弹出一个快捷采集管理界面,是会员中心的一个页面,查看采集状态和导出数据都从这个管理界面上操作

第三类:自定义规则
自己定义的采集规则,要在会员中心的数据管理和任务管理界面上操作

下图两个箭头分别表明了会员中心的数据管理和快捷采集管理的入口
[attach]14555[/attach]

作者: ccccfys    时间: 2021-7-26 18:00
Fuller 发表于 2021-7-7 20:03
新版微博:顶部一条按钮没有文字,只有图案
旧版微博:顶部一条按钮既有文字也有图案

旧版微博已经完全下线了,没有旧版微博了

作者: 内容分析应用    时间: 2021-7-26 18:05
ccccfys 发表于 2021-7-26 18:00
旧版微博已经完全下线了,没有旧版微博了

我登录微博, 看到的还是旧版界面,右边有个“点击进入新版微博”
[attach]14630[/attach]

作者: Jan_AvocaVV    时间: 2021-8-27 15:39
我使用了一下,日志说限制只能翻5页。这是为什么呀?
作者: Jan_AvocaVV    时间: 2021-8-27 15:40
Fuller 发表于 2021-7-7 20:03
新版微博:顶部一条按钮没有文字,只有图案
旧版微博:顶部一条按钮既有文字也有图案

我使用了一下,日志说限制只能翻5页。这是为什么呀?

作者: Fuller    时间: 2021-8-27 15:43
Jan_AvocaVV 发表于 2021-8-27 15:40
我使用了一下,日志说限制只能翻5页。这是为什么呀?

爬粉丝和关注,只能翻5页,这是微博做的限制,爬不到更多

作者: Fuller    时间: 2021-8-27 15:43
爬关键词搜索,最多爬到50页,所以,集搜客微博采集工具箱可以设置细分条件,按小时划分,避免超过50页
作者: shinchan    时间: 2021-12-20 13:02
微博采集可以增加页码范围选择吗?
作者: Fuller    时间: 2021-12-20 14:41
shinchan 发表于 2021-12-20 13:02
微博采集可以增加页码范围选择吗?

是微博关键词搜索采集工具吗?只要是微博网站运行采集的,都可以翻页采集。微博网站限制了50页,那么50页之外的就采集不了了。可以设置细分条件,比如,按照时间细分和微博内容类型细分

作者: 小蜜蜂测试171    时间: 2021-12-20 14:50
shinchan 发表于 2021-12-20 13:02
微博采集可以增加页码范围选择吗?

快捷采集中的微博采集都可以设置选择页码范围
[attach]15296[/attach]
https://www.gooseeker.com/res/rule_620.html

作者: shinchan    时间: 2021-12-22 10:23
Fuller 发表于 2021-12-20 14:41
是微博关键词搜索采集工具吗?只要是微博网站运行采集的,都可以翻页采集。微博网站限制了50页,那么50页 ...

感谢!

作者: shinchan    时间: 2021-12-22 10:24
小蜜蜂测试171 发表于 2021-12-20 14:50
快捷采集中的微博采集都可以设置选择页码范围

https://www.gooseeker.com/res/rule_620.html

谢谢!!

作者: liaowm    时间: 2022-3-16 21:49
1850336355 发表于 2022-1-4 15:21
点击设置就可以跳转到旧版微博。

很容易跳转到旧版

作者: xcdm100    时间: 2022-3-18 10:39
在哪里下载这个工具?
作者: 小蜜蜂测试181    时间: 2022-3-18 11:31
xcdm100 发表于 2022-3-18 10:39
在哪里下载这个工具?

集搜客数据管家下载链接:https://www.gooseeker.com/pro/gooseeker.html

作者: mdl128ping    时间: 2022-5-10 22:38
请问哈,采集微博文章如何让文航带图片一块儿采集打包
作者: Fuller    时间: 2022-5-11 09:31
mdl128ping 发表于 2022-5-10 22:38
请问哈,采集微博文章如何让文航带图片一块儿采集打包

目前的几个微博采集工具都没有下载图片功能,要下载图片和视频的话,要自己定义采集规则。从初级教程开始看起,很快就能知道怎样自己定义采集规则:https://www.gooseeker.com/tuto/tutorial.html

作者: maomao    时间: 2023-2-1 15:54
现在集搜客Gooseeker的微博工具箱已经全面支持新版微博。
您如果还在登陆旧版微博,请转到新版微博。[attach]15726[/attach]








欢迎光临 集搜客GooSeeker网络爬虫 (https://www.gooseeker.com/doc/) Powered by Discuz! X3.2