微信数据采集攻略

zhu94413523 · 发表于 2019-11-13 18:09:40

我搜索代餐，然后每次抓取抖只能抓到100条，是什么原因呢（页数也选择了全部），另外抓取出来的100条，很多都是没有文章链接的

ssguoshunli · 发表于 2020-2-25 17:41:03

为什么复制过来的网址粘贴不上？

Fuller · 发表于 2020-2-25 18:31:27

ssguoshunli 发表于 2020-2-25 17:41
为什么复制过来的网址粘贴不上？

往哪里黏贴不上？有什么现象？

ssguoshunli · 发表于 2020-2-25 23:18:37

Fuller 发表于 2020-2-25 18:31
往哪里黏贴不上？有什么现象？

已经解决，谢谢，但是面临一个问题，采用微信文章列表采集，采集下来的链接网址大部分为空，无法进行下一步的微信文章详细内容采集

wangyong · 发表于 2020-2-26 10:03:48

微信公众号的链接通过列表页无法采到真实的详情网址，目前真实的网址只有人工在列表页点击详情页后，生成的链接才是有效的，另外这个网址也有时效性，两个小时后就无法访问了

wangyong · 发表于 2020-2-26 10:06:56

通过飞掠模式，爬虫可以自动点击详情并采集详情里的页面信息，但是微信反爬很严重，通过这种方式很快也会出现验证码

Fuller · 发表于 2020-2-26 10:13:26

wangyong 发表于 2020-2-26 10:06
通过飞掠模式，爬虫可以自动点击详情并采集详情里的页面信息，但是微信反爬很严重，通过这种方式很快也会出 ...

飞掠模式要购买旗舰版才行

nl86007 · 发表于 2020-3-21 19:04:27

可以只采集微信公众号和ID号吗？

Fuller · 发表于 2020-3-22 09:58:29

nl86007 发表于 2020-3-21 19:04
可以只采集微信公众号和ID号吗？

这个攻略写的比较早，微信公众号的内容能采集到的越来越少了，ID肯定是采集不到的

nl86007 · 发表于 2020-3-23 23:08:15

Fuller 发表于 2020-3-22 09:58
这个攻略写的比较早，微信公众号的内容能采集到的越来越少了，ID肯定是采集不到的
...

哦。太可惜了！

推荐板块

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页