快捷导航
1 6892

如何管理规则的线索

ym 于 2015-10-22 15:57 发表 [复制链接]
本帖最后由 ym 于 2017-1-13 09:57 编辑

常见问题 > 采集数据—常见问题导航 > 采集过程的常见问题 > 如何管理规则的线索

一、应用场景

1、添加网址:做好了一个规则,不仅仅是用来采集样本网页的,还可以采集与样本网页结构相同的网页,只需往规则添加网址就行,每个网址就生成了一条爬虫
线索。例如,做了一个微博搜索关键词的规则,就可以采集不同关键词的微博搜索页面,我们只需把这些网址添加到规则里。
2、激活线索:另外,采集完这批网址,还想重新采集一遍,不用再添加一次,直接激活所有线索,就能重复采集这批网址。
3、删除线索:如果不想再采集这批网址,我们可以去活线索或者是删掉线索,这样爬虫就不会采集了。


二、添加网址
方法1:
登录到集搜客官网,进入会员中心->规则管理,选中某个主题,进入到管理页面,就可以添加、激活、去活、删除线索,添加线索的操作参见教程http://www.gooseeker.com/doc/article-172-1.html
QQ截图20161123120736.png
注意1:免费版爬虫的激活操作最多只能激活前1千条线索,如需激活更多线索,请购买付费版爬虫
注意2:去活与下面提到的撤销是相同的操作,不是删除,只是把线索的状态从等待抓取改为成功抓取,这样就不会采集它,激活后还可以再次使用。

方法2:
打开DS打数机的管理窗口,右击规则名,在弹出的快捷菜单中,统计线索和管理线索是经常用到的,其中,添加线索的操作见http://www.gooseeker.com/doc/article-129-1.html

三、统计线索
在采集数据前,先点击一下统计线索,可以知道该规则是否有待抓取的线索,如果没有就需要去添加新线索或激活已有的线索,如下图。
统计.png

四、管理线索
所有网址都采完后,通常会提示“”可逐条/批量添加新的网址;或者是激活失败线索、激活所有线索、撤销所有线索。
添加.png

举报 使用道具
| 回复

共 1 个关于本帖的回复 最后回复于 2016-11-5 22:33

Fuller 管理员 发表于 2016-11-5 22:33:10 | 显示全部楼层
会员中心的进入方法参看:《怎样进入会员中心?
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 从淘宝的买家评论中,能挖掘出什么有用的信
  • 连续动作:如何把抓到的信息与动作步骤对应
  • 淘宝开店运营十大攻略
  • 深圳市咨询投诉分析
  • 去资源库下载规则,轻松抓数据

热门用户

集搜客GooSeeker网络爬虫 ( 粤ICP备11065265号-2 )

GMT+8, 2017-9-25 12:23