快捷导航
可以把爬虫放到云端服务器上使用吗

举报 使用道具
| 回复

共 8 个关于本帖的回复 最后回复于 2018-5-26 10:37

HJLing 版主 发表于 2017-2-21 17:05:31 | 显示全部楼层
一般都是使用本地电脑采集
云服务器需要收费 具体要详谈
举报 使用道具
漫步云端65148 新手上路 发表于 2017-2-21 17:05:55 | 显示全部楼层
HJLing 发表于 2017-2-21 17:05
一般都是使用本地电脑采集
云服务器需要收费 具体要详谈

用自己的电脑可是这样速度很受限制

举报 使用道具
HJLing 版主 发表于 2017-2-21 17:06:19 | 显示全部楼层
漫步云端65148 发表于 2017-2-21 17:05
用自己的电脑可是这样速度很受限制

使用多台电脑



举报 使用道具
漫步云端65148 新手上路 发表于 2017-2-21 17:06:37 | 显示全部楼层

可我只有一台。。。。
还有其他可以提高效率的方法吗
举报 使用道具
HJLing 版主 发表于 2017-2-21 17:06:53 | 显示全部楼层
漫步云端65148 发表于 2017-2-21 17:06
可我只有一台。。。。
还有其他可以提高效率的方法吗

一台电脑开多个窗口采集


举报 使用道具
漫步云端65148 新手上路 发表于 2017-2-21 17:07:07 | 显示全部楼层
HJLing 发表于 2017-2-21 17:06
一台电脑开多个窗口采集

微博博主主页的数据采集平均一个博主要采集多久?
举报 使用道具
HJLing 版主 发表于 2017-2-21 17:07:28 | 显示全部楼层
漫步云端65148 发表于 2017-2-21 17:07
微博博主主页的数据采集平均一个博主要采集多久?

不清楚
要看网速
要看博主发的微博多少

举报 使用道具
新数据sindns 新手上路 发表于 2018-5-26 10:37:45 | 显示全部楼层
如果只是测试用的话,可以用自己电脑采集,如果是别的用途,最好把爬虫放在服务器上采集,因为服务器可以24小时,不断地运行,并且采集时是很占内存的,用自己电脑的话就干不了别的事了,并且最好用独立服务器,采集时不仅占内存还占带宽,如果放在vps或虚拟主机上面,可能会影响到别的机器,而独立服务器,怎么用都不会影响到别的,所以爬虫的话一般都放在独立服务器上,郑州新数据回答q228109315
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 批量爬取亚马逊商品价格、评论信息
  • 批量爬取eBay商品价格、销售情况信息
  • 批量爬取淘宝商品sku、价格、评价数据
  • 批量爬取速卖通商品价格、评论信息
  • 爬取微博影评人数据做职业特征分析

热门用户

集搜客GooSeeker网络爬虫 ( 粤ICP备11065265号-2 )

GMT+8, 2018-6-20 02:07