Fuller 管理员 发表于 2024-3-26 15:55:01 | 显示全部楼层
18296655033 发表于 2024-3-26 14:29
微博签到采集-此地热议为什么不能翻页啊?手工翻页后为什么只采集了两页就结束了呢? ...

我测试了,翻页采集没有问题。
1. 你的网速怎样?
2. 如果安装了360或者火绒,会大幅度拖慢网络速度,也可能导致采集失败
3. 采集之前,先在爬虫浏览器窗口中登录微博
4. 爬虫运行起来以后,不要缩小爬虫窗口
举报 使用道具
Katrina666 初级会员 发表于 2024-4-2 15:54:14 | 显示全部楼层
抖音话题采集,话题下有很多视频,为什么采集到的数据不全,采集到的数据很少?
举报 使用道具
wangyong 版主 发表于 2024-4-2 17:41:38 | 显示全部楼层
抖音话题能采集的内容有限,可以把话题作为关键词添加到抖音关键词搜索采集工具中:https://www.gooseeker.com/res/rule_801.html
举报 使用道具
zyrklzs1314 初级会员 发表于 2024-4-11 01:38:15 | 显示全部楼层
京东一个商品200万条评论,单品最多能采集多少条评论
举报 使用道具
Fuller 管理员 发表于 2024-4-11 11:17:22 | 显示全部楼层
zyrklzs1314 发表于 2024-4-11 01:38
京东一个商品200万条评论,单品最多能采集多少条评论

JD网站的评论最多能看到100页,所以最多采集上千条
举报 使用道具
MAXIMAOIL 新手上路 发表于 2024-5-7 22:39:47 | 显示全部楼层
為啥淘寶的商品參數採集一直失敗呀

举报 使用道具
wangyong 版主 发表于 2024-5-8 09:43:20 | 显示全部楼层
淘宝商品参数的快捷采集更新了,可以重新采集试试
举报 使用道具
MAXIMAOIL 新手上路 发表于 2024-5-8 12:09:17 | 显示全部楼层
可以幫我測試下這淘寶的網址看能不能得到全部的產品價格嗎 https://item.taobao.com/item.htm?abbucket=11&id=676845181577&ns=1&priceTId=2147bfe517150901853711987e3dc2&spm=a21n57.1.item.6.6a06523cwgRTEN
举报 使用道具
Fuller 管理员 发表于 2024-5-8 16:15:39 | 显示全部楼层
MAXIMAOIL 发表于 2024-5-8 12:09
可以幫我測試下這淘寶的網址看能不能得到全部的產品價格嗎 https://item.taobao.com/item.htm?abbucket=11& ...

这些产品的链接类似这样:
https://item.taobao.com/item.htm ... 0901853711987e3dc2&skuId=4981747536346&spm=a21n57.1.item.6.6a06523cwgRTEN

不同的产品,skuId=4981747536346 后两位不同,可以手工构造链接,然后批量拷贝到 淘宝商品详情采集 快捷工具。





image.jpg
举报 使用道具
少女适俗韵 新手上路 发表于 2024-5-13 16:48:26 | 显示全部楼层
采集总是失败
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-5-23 12:03