只想抓取某一个样例里面的数据(位于页面的上半部),但是运行的时候会把整个网页走到底才结束。
然后系统提示"抓取成功,但爬虫参数还有优化空间以提高抓取速度".
请问要怎么优化?谢谢。

QQ截图20171114213654.png (195.06 KB, 下载次数: 639)

QQ截图20171114213654.png
举报 使用道具
| 回复

共 1 个关于本帖的回复 最后回复于 2017-11-14 22:02

沙发
maomao 论坛元老 发表于 2017-11-14 22:02:15 | 只看该作者
这种情况就不要滚屏,DS打数机菜单 配置 -》滚屏参数,把滚屏次数设置成0,就不滚屏了。

出现提示"抓取成功,但爬虫参数还有优化空间以提高抓取速度",跟滚屏无关,这是因为这个网页一直有脚本没有执行完,所以,DS打数机就一直在等待。为了解决这个问题,你可以选择菜单 配置-》定时器触发,可以提高抓取速度,但是也增加了漏抓的风险。

界面上出现提示的话,可以在教程首页搜索这句话,一般都有答案:http://www.gooseeker.com/tuto/tutorial.html
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-5-5 21:51