我是爬虫新手，如何采集微博数据？求详细的操作步骤

我是爬虫新手，如何采集微博数据？求详细的操作步骤

https://www.gooseeker.com/land/weibo.html

原来每个微博工具箱进入后都有引导，根据提示就能采到数据了，真的很方便~


这是用微博关键词工具采集到的数据。

1、打开官网：https://www.gooseeker.com/，注册集搜客账号
2、你需要先安装集搜客网络爬虫，如未安装，请 登录https://www.gooseeker.com/pro/product.html，下载安装。
3、 打开集搜客浏览器，右上角输入集搜客账号和密码，登录对应的会员中心，确保这两个位置账号一致。如图所示


4、在集搜客网络爬虫中打开 http://weibo.com/ 登录你的微博
5、 访问https://www.gooseeker.com/land/weibo.html，根据采集的对应板块，新建采集任务
6、点击“启动采集”会弹出两个爬虫窗口
7、当采集状态为“已采集”时，点击“打包”按钮
8、最后在右侧“数据下载”中下载数据

需要注意的是，每个板块，要添加对应的网址
比如，要采集某个博主主页的信息，可以先在微博上，找到博主主页的网址，添加到这个版块进行采集

这个版块采集下来的数据，导出excell表格中，可以选出转发和评论不为0的博文的 ‘博文独立网址’添加到上图的‘微博转发/评论信息’采集对应博文的转发和评论信息。

好的，感谢您的回复，我试试看

试了好几次，一直显示这个是怎么回事？可是我明明已经下载爬虫了呀！

菩提栗子 发表于 2020-4-9 12:01
试了好几次，一直显示这个是怎么回事？可是我明明已经下载爬虫了呀！

截图显示，不是用集搜客浏览器打开的，一定要在集搜客浏览器官网登录账号和采集，用集搜客官网打开的，右上角显示如下图

知网期刊 发表于 2020-9-29 10:01
https://www.gooseeker.com/land/weibo.html

原来每个微博工具箱进入后都有引导，根据提示就能采到数据了 ...

第一次使用有引导，以后就没有了，所以，大家要仔细看，错过了就看不到了

现在集搜客发布了增强版爬虫软件，操作更方便，爬取更稳定。下载爬虫软件后，在爬虫浏览器打开微博工具箱，选择合适的工具，爬取微博的关键词搜索，微博的博主博文，微博的博文转发、评论，博主详细信息，微博话题广场等等。