Home › Forums › MetaSeeker工具包

关于当当评论分页抓取时的问题

Tue, 05/03/2011 - 16:32 — zilonglord

我在学习时用当当网站评论分页抓取时，遇到一个问题，在选择“下一页”作为记号节点时，其dom树为：“
div
省略软干节点
span next
attribute
A
attribute
@herf
”
其中A的herf值为：“Javascript:LoadData('2')”,在节点中并没有文本"下一页",这样我在选择记号映射时无法选择如快速手册中的那个案例中的text作为记号标记,但可以选择A或者A下的attribute作为标记,但这样记号节点的值和记号值都无法直接获取,这种情况应该怎么办呢?

‹ metaStudio跟datascrapter帐号密码如何修改？ 我的DataScraper工具为什么没有定时器触发模式？ ›
Tue, 05/03/2011 - 17:45 — Fuller

请给出一个样本网页

将样本网页的URL地址贴出来，我们会有专人研究一下。下一页的翻页记号当前只支持文本或者IMG的src，其它情况会根据客户的需求进行扩展支持。

Wed, 05/04/2011 - 09:04 — zilonglord

谢谢帮忙看一下

http://comm.dangdang.com/review/reviewlist.php?pid=21010683

Wed, 05/04/2011 - 11:32 — Fuller

翻页抓取当当图书评论的方法

这个网页设计是比较独特，用javascript实现翻页，而且表示下一页的按钮可能用CSS加载的，我采用相对线索映射实现了翻页抓取，请参看主题demo_dd_comment_paging。用记号映射似乎这个版本无法做，没有可用记号。相对线索使用方法请参看速成手册中的章节。