本帖最后由 gooseeker_info 于 2015-10-8 18:57 编辑

:抓取的时候遇到timeout to load the page怎么设置爬取的频率、
:出现timeout很可能是因为抓取规则不适合这个网页,也可以调整一下超时时间试试,在DS打数机的菜单中有“超时时长”这项。
MS谋数台上有个菜单“工具”-》“加载规则”-》“按线索号”,选一个timeout的线索号,加载上分析一下失败原因。


:那个“超时时长”参数设置要往小的方向设置吗

:2分钟足够了,还不够的话可能是规则有问题


举报 使用道具
| 回复

共 0 个关于本帖的回复 最后回复于 2015-10-8 18:56

您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 话题分析(NMF模型和LDA模型)软件的安装和
  • 运行Apple无法验证的程序的方法
  • 文本聚类分析软件的安装和使用方法
  • 利用AI阅读和分析文本:扣子COZE记录用户反
  • 在网页片段内直观标注——以B站评论采集为

热门用户

GMT+8, 2025-1-15 18:09