DS爬取数据的时候,下方显示,抓取成功,但爬虫参数还有优化空间以提高抓取速度是怎么回事??

举报 使用道具
| 回复

共 4 个关于本帖的回复 最后回复于 2016-9-23 12:14

沙发
Fuller 管理员 发表于 2016-8-5 17:26:12 | 只看该作者
大家尽量学会使用教程板块的搜索功能,常用的问题都能精准搜索到,比如,这样搜索:http://www.gooseeker.com/tuto/tu ... 6%E9%80%9F%E5%BA%A6
举报 使用道具
板凳
何波波 金牌会员 发表于 2016-8-5 17:28:06 | 只看该作者
举报 使用道具
地板
何波波 金牌会员 发表于 2016-8-5 17:30:50 | 只看该作者
如果出现这种情况,最大可能是网页上有执行不完的JS代码,比如,抓淘宝的信息,抓网易新闻跟评等。每次要等待网页代码执行,一直等到超时,就出现上图提示。
为了提高速度,在DS打数机上可以选择菜单 配置-〉定时器触发 。通常不要选择这个菜单,选择以后可能会抓取过快,造成漏抓,需要在充分测试以后再决定是否选择这个菜单。

优化速度的方法见http://www.gooseeker.com/doc/thread-714-1-1.html
举报 使用道具
5#
Fuller 管理员 发表于 2016-9-23 12:14:50 | 只看该作者
7.x和8.0.0版的用户出现这个问题可能是一个bug引起的,请尽快升级到V8.0.1
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-5-3 04:10