可以把爬虫放到云端服务器上使用吗

可以把爬虫放到云端服务器上使用吗

一般都是使用本地电脑采集
云服务器需要收费 具体要详谈

HJLing 发表于 2017-2-21 17:05
一般都是使用本地电脑采集
云服务器需要收费 具体要详谈

用自己的电脑可是这样速度很受限制

漫步云端65148 发表于 2017-2-21 17:05
用自己的电脑可是这样速度很受限制

使用多台电脑

HJLing 发表于 2017-2-21 17:06
使用多台电脑

可我只有一台。。。。
还有其他可以提高效率的方法吗

漫步云端65148 发表于 2017-2-21 17:06
可我只有一台。。。。
还有其他可以提高效率的方法吗

一台电脑开多个窗口采集

HJLing 发表于 2017-2-21 17:06
一台电脑开多个窗口采集

微博博主主页的数据采集平均一个博主要采集多久？

漫步云端65148 发表于 2017-2-21 17:07
微博博主主页的数据采集平均一个博主要采集多久？

不清楚
要看网速
要看博主发的微博多少

如果只是测试用的话，可以用自己电脑采集，如果是别的用途，最好把爬虫放在服务器上采集，因为服务器可以24小时，不断地运行，并且采集时是很占内存的，用自己电脑的话就干不了别的事了，并且最好用独立服务器，采集时不仅占内存还占带宽，如果放在vps或虚拟主机上面，可能会影响到别的机器，而独立服务器，怎么用都不会影响到别的，所以爬虫的话一般都放在独立服务器上，郑州新数据回答q228109315