本帖最后由 ray_zhurui 于 2016-8-22 11:15 编辑

希望大神有时间开个系列视频讲解一下gooseeker的源代码。
举报 使用道具
| 回复

共 8 个关于本帖的回复 最后回复于 2016-8-18 18:26

沙发
Fuller 管理员 发表于 2016-8-13 21:19:02 | 只看该作者
可以多讨论,目前我们的python程序会比较倾向于与Scrapy结合,一些小的抓取任务就直接写一个独立的小爬虫,大型的任务会利用Scrapy框架。GUI部分现在不能开放源码
举报 使用道具
板凳
ray_zhurui 中级会员 发表于 2016-8-14 00:02:41 | 只看该作者
Fuller 发表于 2016-8-13 21:19
可以多讨论,目前我们的python程序会比较倾向于与Scrapy结合,一些小的抓取任务就直接写一个独立的小爬虫, ...

需要哪些前置知识铺垫才能读懂gooseeker的代码(推荐阅读的图书列表是)?作者在用的IDE是哪个?需要其他配置和包么?
举报 使用道具
地板
ray_zhurui 中级会员 发表于 2016-8-14 18:57:57 | 只看该作者
Fuller 发表于 2016-8-13 21:19
可以多讨论,目前我们的python程序会比较倾向于与Scrapy结合,一些小的抓取任务就直接写一个独立的小爬虫, ...

请问python做数据分析一般用什么IDE?用什么来做数据预处理和存储(数据量较大的时候)?后期数据可视化和处理用什么库来做?
举报 使用道具
5#
Fuller 管理员 发表于 2016-8-14 20:34:37 | 只看该作者
ray_zhurui 发表于 2016-8-14 18:57
请问python做数据分析一般用什么IDE?用什么来做数据预处理和存储(数据量较大的时候)?后期数据可视化 ...

这些都是因人而异,我们写java程序出身的,都用eclipse。还有一些老程序员,IDE都不用,直接用vi命令行编辑器

关于存储和可视化,都有很多比较受欢迎的软件,自己根据喜好去选择就行
举报 使用道具
6#
ray_zhurui 中级会员 发表于 2016-8-15 11:02:36 | 只看该作者
Fuller 发表于 2016-8-14 20:34
这些都是因人而异,我们写java程序出身的,都用eclipse。还有一些老程序员,IDE都不用,直接用vi命令行编 ...

Python对MySql的支持怎么样?用什么类库存取最好?
举报 使用道具
7#
Fuller 管理员 发表于 2016-8-15 15:20:58 | 只看该作者
Python这么强大,对MySQL的支持肯定也是很好的
举报 使用道具
8#
759924607 高级会员 发表于 2016-8-18 16:17:39 | 只看该作者
Fuller 发表于 2016-8-15 15:20
Python这么强大,对MySQL的支持肯定也是很好的


Python安装完,有这两个程序。这样就可以了吗?为什么你们还要再设置IDE呀?
举报 使用道具
9#
Fuller 管理员 发表于 2016-8-18 18:26:27 | 只看该作者
759924607 发表于 2016-8-18 16:17
Python安装完,有这两个程序。这样就可以了吗?为什么你们还要再设置IDE呀?
...

是否使用ide,引人而异。

Python这个语言,跟其它很多语言类似,都是喜爱命令行编辑(比如,vi)的人发明的,很多人至今觉得vi很方便,不需要ide。

但是ide有很大的好处,虽然编辑速度变慢了(要不断操作鼠标),但是可以融入很多代码检查功能,最简单的用不同颜色标记不同的关键词,一眼就能看到哪里写错了,还能做即时的语法检查,甚至与测试工具集成
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-4-20 15:51