我发现爬取24年以前的,比如23、22年,只要爬取一个月之后推特页面就没有了。有没有大哥答疑一下,或者说是我梯子、账号的问题?但是我爬24年的1-8月份就都能爬取下来
举报 使用道具
| 回复

共 7 个关于本帖的回复 最后回复于 2024-8-11 10:44

沙发
Fuller 管理员 发表于 2024-8-8 17:07:30 | 只看该作者
搜索的时候有没有使用twitter网页上的高级搜索?
举报 使用道具
板凳
chemical 初级会员 发表于 2024-8-8 17:30:09 | 只看该作者
Fuller 发表于 2024-8-8 17:07
搜索的时候有没有使用twitter网页上的高级搜索?

就是在这里面设置的呀

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
地板
Fuller 管理员 发表于 2024-8-8 17:38:46 | 只看该作者
chemical 发表于 2024-8-8 17:30
就是在这里面设置的呀

是否选择了起止时间?
举报 使用道具
5#
chemical 初级会员 发表于 2024-8-8 18:05:18 | 只看该作者
Fuller 发表于 2024-8-8 17:38
是否选择了起止时间?

设置的是2023年1月1日到2023年12月31日,设置了好几次,间隔都是好几个月,但是每次都是爬完一个月,准备到下一个月了就搜索不到了。不是卡了加载不出来的那种,就是完全没有了好像已经到底的感觉
举报 使用道具
6#
Fuller 管理员 发表于 2024-8-8 22:03:50 | 只看该作者
再把时间间隔设置的小一些试试
举报 使用道具
7#
chemical 初级会员 发表于 2024-8-11 10:04:13 | 只看该作者
Fuller 发表于 2024-8-8 22:03
再把时间间隔设置的小一些试试

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
8#
Fuller 管理员 发表于 2024-8-11 10:44:12 | 只看该作者

这种情况就采集不到数据了,twitter可能有过滤策略,以前的内容会比较多地过滤掉不显示
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 利用AI阅读和分析文本:扣子COZE记录用户反
  • 在网页片段内直观标注——以B站评论采集为
  • 利用AI阅读和分析文本:使用COZE建设游记文
  • 使用AI工具Kimi生成python代码为文本分析结
  • 苹果mac电脑安装集搜客网络爬虫软件失败的

热门用户

GMT+8, 2024-11-18 16:26