你好,我想问一下,集搜客可以加判断语句吗?比如我爬评论,只想要爬一个特定时间段的可以吗。

QQ图片20161128100736.png (95.39 KB, 下载次数: 880)

QQ图片20161128100736.png
举报 使用道具
| 回复

共 7 个关于本帖的回复 最后回复于 2016-11-28 17:26

沙发
Fuller 管理员 发表于 2016-11-28 10:19:25 | 只看该作者
当前还不支持,这个需求可以规划到未来版本中
举报 使用道具
板凳
ym 版主 发表于 2016-11-28 10:44:26 | 只看该作者
可以控制翻页,只采集前N页的评论,后面再用excel或其他工具根据时间过滤
举报 使用道具
地板
wangyong 版主 发表于 2016-11-28 10:59:03 | 只看该作者
只想爬11.02的?
举报 使用道具
5#
qingmu888 中级会员 发表于 2016-11-28 16:58:51 | 只看该作者
ym 发表于 2016-11-28 10:44
可以控制翻页,只采集前N页的评论,后面再用excel或其他工具根据时间过滤

奥奥,明白了

举报 使用道具
6#
qingmu888 中级会员 发表于 2016-11-28 16:59:55 | 只看该作者

只是打个比方,好奇集搜客可不可以有判断功能
举报 使用道具
7#
scraper 论坛元老 发表于 2016-11-28 17:04:08 | 只看该作者
网页上的数据格式可能会因为网站改版而变化,抓取下来再后处理,可以较少因格式变化引起的数据丢失
举报 使用道具
8#
Fuller 管理员 发表于 2016-11-28 17:26:41 | 只看该作者
qingmu888 发表于 2016-11-28 16:59
只是打个比方,好奇集搜客可不可以有判断功能

判断功能一直没做,因为数据处理方面稍微有些工作量,比如,要转换成数字,或者转换成日期,等等,为了让爬虫尽量简单,把这个工作都推给入库后的处理程序了。这个判断功能的开发我们安排一下计划
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-5-5 11:22