抓取优酷评论

用户wangyong新发布了一个采集规则:
抓取优酷评论
详细信息:
抓取优酷视频下的评论信息，包括用户名称、评论内容、评论时间和来自网站。采集这些信息可了解网民态度。

希望大家喜欢！下载地址: http://www.gooseeker.com/res/detail_89136.html

如果一个内容很多页，我只能把一页的内容抓下来，多页码的怎么抓下来啊?

@tthaizhiguang  问题已经在社区页提问中回答，详见社区页面http://www.gooseeker.com/doc/thread-216-1-1.html

这个是抓取一个视频的多页评论是吧。。？

我点击了下载，在这个系统 ->我的下载  ，里面能找到这个资源，如果我想再次运行该怎么办？

tthaizhiguang 发表于 2015-8-15 22:39
我点击了下载，在这个系统 ->我的下载  ，里面能找到这个资源，如果我想再次运行该怎么办？ ...

可以激活线索，在DS打数机的主题列表中，先搜到这个主题，选中他，点鼠标右键，在弹出菜单中选择 管理线索-〉激活所有线索

或者添加新线索，也是在右键菜单中有这个添加菜单。一行一条网址。但是要注意，新添加的网页结构要与这个抓取规则的一致，否则就会抓取失败

gooseeker_info 发表于 2015-8-15 23:47
可以激活线索，在DS打数机的主题列表中，先搜到这个主题，选中他，点鼠标右键，在弹出菜单中选择 管理线 ...

这个 从我的下载 里面看到的资源名称 和 在DS打数机 里面看到的主题名是不一样的是吧？

我用我的下载 里面的 “抓取资源评论” 在DS 打数机里面搜索，没找到呢。。
但是在我的打数机里面多了一个和youku*  相关的 主题 ，

这个第一页的评论抓取很快，第 2 、3、4 。。。后面的几页怎么那么慢呢？我自己尝试着 做了一个规则 基本每页 评论下来 需要10分钟的时间，
这个规则最快的也得3分钟，还有办法提高效率吗？ 一个小时才抓20页的评论啊。。

如果一个优酷视频有100页， 抓取优酷一个栏目下的视频要花费很长时间了

可以在DS打数机配置中勾选“定时器触发”，关于定时器触发功能的解释：
     定时器触发：一些动态网页会在加载之后，还会与服务器一直通信（即所谓的AJAX动态网页），导致爬虫以为网页没有加载完毕，一直等待而不执行抓取，一直等到超时，这样会严重拖慢抓取速度。勾选“定时器触发”后,在抓取这种动态网页时，爬虫会在一定时间后就执行抓取。在抓一些淘宝店铺的网页时通常需要勾选“定时器触发”。

Tips：勾选“定时器触发”后，有时也会在网页没有完全显示时，就执行抓取，这时就有可能漏抓内容。 那么，通常的使用原则是：先不设置此选项，如果发现确有必要才设置。

哇 多页也可以抓取啊！！！