可以简单明了地说说具体实际操作吗?什么爬虫群、crontab 看了整天都实在看得云里雾里的,这么个简单常用功能至于弄得那么复杂吗?
说说我遇到的场景:我需要采集一个以分钟为单位刷新的彩票网站的数据,想统计一下里面的数据。
有个条件:网站不是自动刷新的,要手动键盘f5或者单击右键刷新的,所以不知道怎么弄。规则我已经弄好了,就差定期更新步骤的设定了,求看到的高人指点一下~谢谢~~
举报 使用道具
| 回复

共 1 个关于本帖的回复 最后回复于 2016-10-15 23:46

沙发
Fuller 管理员 发表于 2016-10-15 23:46:52 | 只看该作者
无法自动刷新的话,需要定时激活线索,这个文章的3.2节讲解怎样激活线索,http://www.gooseeker.com/doc/article-200-1.html

要用爬虫群模式,在会员中心设置调度参数,但是开放的这个功能只允许每天激活一次,高频激活必须定制。
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-4-28 17:20