这个能大量抓取微信公众号的文章吗

拯救地球

这个能大量抓取微信公众号的文章吗

HJLing · 发表于 2017-2-7 14:24:24

只要能访问就能采

拯救地球 · 发表于 2017-2-7 14:25:35

HJLing 发表于 2017-2-7 14:24
只要能访问就能采

那要是IP被封了怎么办

HJLing · 发表于 2017-2-7 14:38:26

拯救地球发表于 2017-2-7 14:25
那要是IP被封了怎么办

换IP
大批量采集的话网站一般都会限制访问
可以放慢采集速度
定时换ip清cookie

xandy · 发表于 2017-2-22 10:45:16

集搜客推出的数据DIY，只要添加网址或关键词就可以添加任务下载各个网站的数据了。

微信数据可以进入数据DIY微信分类下选取各个页面即时采集并下载数据，涵盖的页面有：微信文章列表采集、微信公众号搜索列表等等，后续会有更多的网站上架。
不用花时间学习爬虫，点点鼠标就可以获取了。

共 4 个关于本帖的回复最后回复于 2017-2-22 10:45

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页