1371#
Fuller 管理员 发表于 2022-5-25 15:23:33 | 只看该作者
Yangyang1999 发表于 2022-5-25 13:05
请问是否可以获取微博数据的发布经纬度坐标?

如果已经采集到了详细的地址信息,需要利用百度地图的api翻译成经纬度。

爬虫只能采集到网页上显示出来的内容,如果网页上显示了经纬度,可以直接采集下来。如果显示的是地址,需要翻译。
举报 使用道具
1372#
wanghaibo215 新手上路 发表于 2022-6-3 16:06:48 | 只看该作者
为什么每次采集微博评论后采集状态都显示黄色的已停止,不成功的原因是什么呢?
举报 使用道具
1373#
gz51837844 管理员 发表于 2022-6-4 08:56:52 | 只看该作者
wanghaibo215 发表于 2022-6-3 16:06
为什么每次采集微博评论后采集状态都显示黄色的已停止,不成功的原因是什么呢? ...

你把添加的网址发出来技术测试下
举报 使用道具
1374#
lucccia99102 新手上路 发表于 2022-6-11 02:55:43 | 只看该作者
大家有出现用户不存在的现象吗?
举报 使用道具
1375#
Fuller 管理员 发表于 2022-6-11 09:10:11 | 只看该作者
lucccia99102 发表于 2022-6-11 02:55
大家有出现用户不存在的现象吗?

微博用户不存在了?这种偶尔会遇到。可以手工打开这个用户的微博网页看看,手工试几次,防止网络太慢造成误判
举报 使用道具
1376#
chenpengpeng01 中级会员 发表于 2022-7-12 15:09:03 | 只看该作者
test
举报 使用道具
1377#
chenpengpeng01 中级会员 发表于 2022-7-12 15:12:23 | 只看该作者
https://weibo.com/daomeijiu?refer_flag=1001030103_&is_hot=1

微博博主详细资料采集工具 这个采集的简介字段有问题, 简介明明是 ”简介: 是九久啊
举报 使用道具
1378#
chenpengpeng01 中级会员 发表于 2022-7-12 15:13:20 | 只看该作者
真正需要的是用户自己的简介
举报 使用道具
1379#
gz51837844 管理员 发表于 2022-7-12 16:30:59 | 只看该作者
chenpengpeng01 发表于 2022-7-12 15:12
https://weibo.com/daomeijiu?refer_flag=1001030103_&is_hot=1

微博博主详细资料采集工具 这个采集的简介 ...

我们测试下
举报 使用道具
1380#
gz51837844 管理员 发表于 2022-7-12 17:23:42 | 只看该作者
chenpengpeng01 发表于 2022-7-12 15:13
真正需要的是用户自己的简介

目前“简介”字段是从下图的位置1取值的,而不是从位置2.
我们评估下怎样改进,比如新增一个字段“自我简介”, 值从位置2取

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 运行Apple无法验证的程序的方法
  • 文本聚类分析软件的安装和使用方法
  • 利用AI阅读和分析文本:扣子COZE记录用户反
  • 在网页片段内直观标注——以B站评论采集为
  • 利用AI阅读和分析文本:使用COZE建设游记文

热门用户

GMT+8, 2024-12-21 22:28