微信数据采集攻略

Fuller 发表于 2019-4-29 15:31
搜狗微信的首页应该是这一个：https://weixin.sogou.com/

可以了，谢谢！

如何将微信文章链接转换为永久链接[即去除时效性]呢？

1000sprites 发表于 2019-7-14 10:59
如何将微信文章链接转换为永久链接[即去除时效性]呢？

用算法剔除太难了

微信搜索每次到50，60页的时候网址就会让写验证码，抓取就失败了，也已经登陆了，请问怎么解决呢，谢谢

是靖靖靖哇ai 发表于 2019-8-8 10:22
微信搜索每次到50，60页的时候网址就会让写验证码，抓取就失败了，也已经登陆了，请问怎么解决呢，谢谢 ...

这个不好解决，要么手工打码，要么用集搜客爬虫的打码功能，只有旗舰版才有，而且要在第三方打码平台上开户，目前支持云速打码和联众打码，自从云速打码平台被关闭以后，打码精度就很低了，最近还在寻找其他高精度的打码

Fuller 发表于 2019-8-8 10:29
这个不好解决，要么手工打码，要么用集搜客爬虫的打码功能，只有旗舰版才有，而且要在第三方打码平台上开 ...

我基本上就一直看着手工打码了，当时3600多条消息，只能爬下来1660条，而且没有错误，显示成功，请问是什么原因呢，是我爬的数据太多嘛？

是靖靖靖哇ai 发表于 2019-8-8 10:36
我基本上就一直看着手工打码了，当时3600多条消息，只能爬下来1660条，而且没有错误，显示成功，请问是什 ...

是一种反爬虫措施，限制很严

Fuller 发表于 2019-8-8 10:46
是一种反爬虫措施，限制很严

那这种问题是没有办法解决的是吗

是靖靖靖哇ai 发表于 2019-8-8 10:50
那这种问题是没有办法解决的是吗

我不用快捷采集，自己定义规则也会受到限制是吗？

是靖靖靖哇ai 发表于 2019-8-8 10:51
我不用快捷采集，自己定义规则也会受到限制是吗？

一样受影响，这是目标网站定的策略，一般是根据访问的数量决定是否要显示验证码