新浪微博_评论抓取规则发布了，欢迎下载使用

我刚新发布了一个采集规则:   新浪微博_评论

详细信息:

      采集热门博文的评论信息，用于分析微博效果、舆论走向、用户心理行为、舆情分析等，通过定时采集可实现持续监控的效果；微博采集需要登录账号，且要定期（1/2天）更换微博账号，降低封锁风险。      
     可与新浪微博_博主主页、新浪微博_博主详细信息、新浪微博_搜索列表、新浪微博_话题等规则资源结合使用，能够实现更加全面深入的分析研究。

希望大家喜欢！下载地址: http://www.gooseeker.com/res/detail_89131.html

这个规则采集的信息真全，懒得自己做了，下载一个用用

这个资源好用！有个问题，就是如果某篇热门博文有200多页的评论时，好像微博经常翻不完整，为什么？

"矿工的风采 2015-08-14 17:24
这个资源好用！有个问题，就是如果某篇热门博文有200多页的评论时，好像微博经常翻不完整，为什么？"

To 矿工的风采：
对于比较热门的微博，其评论一般会在发布后快速增长，而微博服务器一般会设计有反抓取机制，以防这些评论被用户下载到本地，任何爬虫软件都会遇到同样的问题，只就只能通过我们采集GooSeeker爬虫软件的定时自启动功能进行循环抓取评论数据的前50页，通过设定间隔一定时间如1小时就启动一次爬虫进行抓取，最后把全部抓取到的评论在数据库进行程序自动去重处理。

下载来试一试

我想请问下，我下载了该规则，点击运行之后，弹出了DS 打数机，但是并没有自动抓取，接下来我要怎么操作呢？

丁道师 发表于 2015-8-17 17:10
我想请问下，我下载了该规则，点击运行之后，弹出了DS 打数机，但是并没有自动抓取，接下来我要怎么操作呢 ...

一开始一条线索都没有，就是说没有要抓的网页地址。可以手工录入，在DS打数机上，选中这个抓取规则，点击右键，有管理线索-》添加菜单，一行行输入网址

主要是要控制一下输入的网址是否符合这个抓取规则要求的网页结构，可以在资源详情页上打开样本页面看，对比一下

刚刚下载看，觉得还行，等下抓完了再来评论