新浪微博_评论抓取规则发布了，欢迎下载使用

要抓取的网址可以成批加入，有两个方案
1，在DS打数机上，选中这个抓取规则，点击鼠标右键，看到弹出菜单，选择 管理线索里面的添加，一行一个网址，可以加成百上千网址
2，如果还想添加更多网址，就到会员中心去添加，本网站登录以后，右上角有用户名，点击此处，就能进入会员中心，有爬虫管理 版块，进入 规则管理，选择那个抓取规则，对应有线索添加功能

先收藏，暂时积分不够。自己之前也尝试过采集评论，但是不知道为什么不太稳定，有时候卡住出不来。还是等等这个专业的吧

debora 发表于 2016-3-24 13:14
先收藏，暂时积分不够。自己之前也尝试过采集评论，但是不知道为什么不太稳定，有时候卡住出不来。还是等等 ...

在个人中心右侧可以看到送积分的两个活动，然后自己再充值一点就够了。

我的积分足够了，现在下载了，运行时出现了一个问题，按照说明输入网址后，运行打数机，它一直停留在微博评论第一页底部，没有翻页，请问这个如何处理？

xandy 发表于 2016-3-24 14:41
在个人中心右侧可以看到送积分的两个活动，然后自己再充值一点就够了。 ...

谢谢提醒！现在积分足够啦

是不能爬取转发的信息么？比如转发用户的信息？

bmmmbm 发表于 2016-3-26 14:27
是不能爬取转发的信息么？比如转发用户的信息？

这个是抓评论内容的，转发用户是谁也抓，但是不会进入到这个转发者首页中抓进一步博主信息，比如跟另外的规则配合使用才能深入抓取。

一套微博采集工具箱发布了，可以不用单独下载规则：http://www.gooseeker.com/land/weibo.html

Fuller 发表于 2016-3-26 15:35
这个是抓评论内容的，转发用户是谁也抓，但是不会进入到这个转发者首页中抓进一步博主信息，比如跟另外的 ...

样本页中的原博本身也是一条转发微博，我爬下来的转发信息全部对应的是最初那条微博的信息，而不是又经原博转发的用户信息，而且有很多特征木有爬到

这个规则用于抓取一个微博下的所有评论，如上图，很多评论，而微博原文和转发的微博是放在结果文件最下面，到导入excel后，微博原文和转发的微博每行都有，是重复的，评论不重复

新浪微博评论的博文部分，网页结构发生改变，原有规则就会采集失败，现已更新了规则，大家可以重新下载继续使用