maomao 论坛元老 发表于 2021-4-19 16:43:47 | 显示全部楼层
秋汐 发表于 2021-4-19 13:51
不能爬取图片的url吗

可以爬,要自己按教程做采集规则,或者定制规则
举报 使用道具
jia19910121 新手上路 发表于 2021-4-24 14:43:11 | 显示全部楼层
因设置了限制翻页数:5,翻页已中断,粉丝采集出现这个,只能采集5页怎么解决。
举报 使用道具
Fuller 管理员 发表于 2021-4-24 15:46:23 | 显示全部楼层
jia19910121 发表于 2021-4-24 14:43
因设置了限制翻页数:5,翻页已中断,粉丝采集出现这个,只能采集5页怎么解决。 ...

粉丝和关注信息只能采集5页
举报 使用道具
发布会将分别 新手上路 发表于 2021-6-3 18:49:53 | 显示全部楼层
微博转发和评论数据采集当中,提示我登录微博,但是我已经登陆了,可是它提示我若已登录请点击此处,但是我点击不起,求,超级急
举报 使用道具
Fuller 管理员 发表于 2021-6-3 20:08:28 | 显示全部楼层
发布会将分别 发表于 2021-6-3 18:49
微博转发和评论数据采集当中,提示我登录微博,但是我已经登陆了,可是它提示我若已登录请点击此处,但是我 ...

启动不了爬虫,99%是因为没有登录爬虫客户端,如果没有登录爬虫客户端,在访问微博采集工具的时候,应该每一步都有提示的。是否登录客户端,要这样看:
1,最底部的状态条右边有两个状态图标,如果是红色,就没有登录。应该是绿色的才对
2,左下角应该显示头像,才是登录了的。如果显示“登录”,那是没有登录,点击那里进行登录。

如果点击登录没有反应,应该是遇到了爬虫的bug,这个bug将在V10.7.0(马上发布)上改正了。当前版本的应对方法是:重启爬虫客户端,按照提示,登录爬虫。

登录.png
举报 使用道具
cj888888 新手上路 发表于 2021-6-23 20:03:11 | 显示全部楼层
请问采集的数据有位置信息吗
举报 使用道具
Fuller 管理员 发表于 2021-6-24 10:27:21 | 显示全部楼层
cj888888 发表于 2021-6-23 20:03
请问采集的数据有位置信息吗

可以把地名采集下来,把地名变成地理经纬度其实是很容易的。

首先,要转换的不会很多,即使一个个去查都可以
其次,百度地图这类平台都是查坐标的功能,如果要查的很多,还可以写个程序,调用百度api
举报 使用道具
memo372301170 新手上路 发表于 2021-7-2 13:27:49 | 显示全部楼层
请问数据采集不了,老是显示失败超时需要怎么设置呢,试了只有一条数据也这样
举报 使用道具
wangyong 版主 发表于 2021-7-2 14:14:53 | 显示全部楼层
memo372301170 发表于 2021-7-2 13:27
请问数据采集不了,老是显示失败超时需要怎么设置呢,试了只有一条数据也这样 ...

具体用的是哪个工具添加的什么链接发一下我们测试一下

可以先检查一下是不是进入了新版微博,如果是这样按照这个帖子切换一下:https://www.gooseeker.com/doc/thread-18757-1-1.html
举报 使用道具
takitakitaki0000 新手上路 发表于 2021-7-2 16:07:36 | 显示全部楼层
采集微博博主详细资料的功能 链接就是随便一个微博主页链接都不行 比如我试的这个:https://weibo.com/5766907756?profile_ftype=1&is_all=1#_0
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-4-19 00:27