第一层抓取页面:
http://lailier.tmall.com/search.htm?spm=a220o.1000855.6-5517914743.1.4x9...
规则:my_demo_taobao_list
成功抓取到64条URL线索
第二层:
每一条线索的对应单页
规则:my_demo_taobao_list_product
问题:
第二层规则提取时,线索统计为64
选择提取时线索数写了64
但是只提取了一页就停止了
卡在“剩余线索数63”
请fuller帮忙看看是什么原因?
另:如果我在第二层提取成功之后接着再提取评论以及成交纪录,是否是再从第二层规则延伸出第三层?
还有,我有一个帐号无怎么会失效了?
帐号名:luoke88
网页抓取超时
第二层不会停止,而是抓取规则不适合,需要等待超时退出。在DataScraper菜单上有个菜单可以设置超时时间,单位是毫秒。可以设置短一些,不过最关键的还是搞清楚为什么抓取规则不适合
评论和成交记录抓取可以放在第三级。如果是抓取淘宝宝贝,可以参看速成手册,里面有专门一节讲解淘宝成交记录的抓取方法