软件反应慢,不是抓数据慢,软件运行不流畅了,有点死机的感觉。Win7系统,连续运行了10个小时,只开了一个窗口,又翻页动作,有点假死的感觉,最开始大概9秒左右翻一页,程序反应流畅,现在几十秒翻一页!操作菜单变慢,其他软件运行正常。有解决方案么?

举报 使用道具
| 回复

共 1 个关于本帖的回复 最后回复于 2017-8-21 10:06

沙发
bowieD 金牌会员 发表于 2017-8-21 10:06:02 | 只看该作者
1.可能是占用的内存太多了,如果是抓取单页,可以把爬虫重新启动一次
2.跟网站也有关系,有些网站翻页会越来越慢,即使手工翻页也是,如采集东方财富网,菜单操作就受影响。
3.很可能这个网站上有大量的脚本程序,翻页越多速度越慢。这种改善不了,只能运行一段时间重启一下
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-5-8 11:39