集搜客GooSeeker网络爬虫

标题: 微博博主热门话题 [打印本页]

作者: 18819822199 时间: 2022-4-19 15:14
标题: 微博博主热门话题
本帖最后由 18819822199 于 2022-4-19 15:21 编辑

我想抓取人民日报微博，主持和发起的话题，特定日期区间，怎样操作？求教！！我尝试使用主页数据以及热门话题工具几次都失败了，使用旧版已经登录。

作者: Fuller 时间: 2022-4-19 16:54
还是要用微博主页采集工具：https://www.gooseeker.com/res/softdetail_3.html

选择采集全部历史数据的选项，采集下来以后，导出数据，在excel中筛选出来主持的话题。

采集微博主页本来是比较稳定的，比较容易全部采集下来，采集失败的可能原因是：
1. 在微博主页上设置的筛选条件太多了，筛选越多，约容易失败。如果什么条件都不筛选，得到一个最纯粹的网址，才容易采集到所有微博2. 网络速度要足够快
3. 爬虫运行的时候，要确保爬虫窗口放大到最大

欢迎光临集搜客GooSeeker网络爬虫 (https://www.gooseeker.com/doc/)