681#
zza1995 新手上路 发表于 2018-5-13 17:55:12 | 只看该作者
要爬的用户比较多,没这么多积分下载数据,可以一次性购买规则吗。那个16年2月份更新的2000积分的规则,和这个是一样的吗,还是那之后就再没更新过
举报 使用道具
682#
离离原上草 初级会员 发表于 2018-5-13 18:58:58 | 只看该作者
zza1995 发表于 2018-5-13 17:55
要爬的用户比较多,没这么多积分下载数据,可以一次性购买规则吗。那个16年2月份更新的2000积分的规则,和 ...

这个规则和工具箱的规则,是一个,可以用的。也可以购买旗舰版,299元/月,任意下载数据,不需要积分。
举报 使用道具
683#
874527466 新手上路 发表于 2018-5-16 19:50:12 | 只看该作者
使用这个工具的时候怎么预览已经抓取的数据?
举报 使用道具
684#
Fuller 管理员 发表于 2018-5-16 20:02:20 | 只看该作者
874527466 发表于 2018-5-16 19:50
使用这个工具的时候怎么预览已经抓取的数据?


选中一个任务,下面就显示实际数据。如果不选中,就是demo数据

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
685#
fr1115mini 中级会员 发表于 2018-5-29 18:13:34 | 只看该作者
爬虫主题显示unassigned,我尝试更改服务器地址,也没有出来
举报 使用道具
686#
fr1115mini 中级会员 发表于 2018-5-29 18:20:41 | 只看该作者
有的时候打数机没有显示翻页,但是另一页反馈出数据打包是怎么回事
举报 使用道具
687#
Fuller 管理员 发表于 2018-5-29 18:50:10 | 只看该作者
fr1115mini 发表于 2018-5-29 18:13
爬虫主题显示unassigned,我尝试更改服务器地址,也没有出来

能否截个图,在哪里显示unassigned?是在DS打数机状态面板上吗?如果是这里,那么这表示还没有给他分配任务。

DS打数机有两种窗口:
1,从集搜客爬虫浏览器的工具条上,点击“DS打数机”运行起来的窗口,主要是起管理作用。他的状态面板上的主题名一直是unassigned,直到你手工启动抓数据才填写内容
2,自动抓取数据的窗口,也就是点击微博采集工具箱页面上的“启动采集”运行起来的窗口,这些窗口会自动接受工具箱发来的采集任务,一旦接到任务,主题名就从unassigned变成真正的任务名

通常会同时运行两个自动抓取数据的窗口,不要关闭他们,一个抓数据,一个打包数据
举报 使用道具
688#
Fuller 管理员 发表于 2018-5-29 18:51:26 | 只看该作者
fr1115mini 发表于 2018-5-29 18:20
有的时候打数机没有显示翻页,但是另一页反馈出数据打包是怎么回事

你使用的微博采集工具是哪一个?关键词搜索还是博主主页?

是否翻页跟工具有关,也跟网页上有多少数据有关。如果只有一页,比如,采集博主主页,如果你只选择采集首页一页,那么不会翻页
举报 使用道具
689#
fr1115mini 中级会员 发表于 2018-5-30 13:24:17 | 只看该作者
是在状态面板上显示,主题名称:unassigned
举报 使用道具
690#
fr1115mini 中级会员 发表于 2018-5-30 13:25:12 | 只看该作者
我用的是微博主页采集,原来的时候我可以用两台电脑同时爬,现在Mac电脑总是不爬取了。
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 运行Apple无法验证的程序的方法
  • 文本聚类分析软件的安装和使用方法
  • 利用AI阅读和分析文本:扣子COZE记录用户反
  • 在网页片段内直观标注——以B站评论采集为
  • 利用AI阅读和分析文本:使用COZE建设游记文

热门用户

GMT+8, 2024-12-28 05:41