集搜客GooSeeker网络爬虫

标题: crontab应该怎么写? [打印本页]

作者: 韧柳御风    时间: 2016-11-24 17:56
标题: crontab应该怎么写?
crontab应该怎么写?怎么生效?


作者: AnswerDSL    时间: 2016-11-24 18:06
其实crontab和爬虫群功能差不多,我推荐你使用爬虫群,这样还不用自己动手写crontab代码。
通过crontab程序可以建立n个DS爬虫窗口采集特定的主题规则,而会员中心的爬虫群则是把设置了调度的主题自动分配给n个DS窗口来采集。两者的共同点都是在DS的爬虫群菜单进行手工启动,只要规则有等待抓取的线索,DS爬虫就会自动采集。
具体内容可以参考这个教程:http://www.gooseeker.com/doc/article-112-1.html
作者: Fuller    时间: 2020-9-17 09:34
只有旗舰版用户才能用本地的crontab.xml文件




欢迎光临 集搜客GooSeeker网络爬虫 (http://www.gooseeker.com/doc/) Powered by Discuz! X3.2