V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  levelworm  ›  全部回复第 203 页 / 共 203 页
回复总数  4060
1 ... 194  195  196  197  198  199  200  201  202  203  
做数据仓库,做数据可视化,然后尝试一点数据挖掘。
突然看到你们都做了。。。很强啊,看来是有高人在做数据科学这一块。数据可视化这一块不知道是只是浅显的做了做,还是有数据仓库之类的?
2019-11-22 22:57:47 +08:00
回复了 pibicha 创建的主题 程序员 被强拉来做 Olap 系统,求大佬指点怎么搞
@pibicha 我也不是 BI 的,是 BA。。。不过经常和他们接触就是了。你要出报表的话,肯定有需求对吧,有了需求就知道大体上目前的数据行不行了。因为很多时候原始数据查询起来特别麻烦,效率很低,所以这时候就要做成 OLAP,然后再写查询,最后进可视化软件。但是具体怎么做我也不懂,而且我印象中 Clickhouse 本身就是 column-based,适合做数据仓库,所以弄不好不怎么需要处理?
2019-11-22 11:25:54 +08:00
回复了 zhuzhuaini 创建的主题 Python Python 如何从一个文本中取每一行到另外一个文本中匹配
我琢磨着数据量不大的话导入到 sqlite 里头做查询怎么样。。。
2019-11-22 11:06:25 +08:00
回复了 zender 创建的主题 程序员 请教个问题,客户有个需求是根据数据算出一个材料的用量
最好能举个例子,如果是社交网站那种 A 的朋友的朋友的朋友。。。这种查询,据说是图数据库比较好,不然就要递归。
2019-11-22 08:42:18 +08:00
回复了 levelworm 创建的主题 程序员 职场求助,想从 BA 转 BI,求问应该如何准备?
@shakoon 我因为是从业务过来的所以觉得这块没有很大障碍。BI 也的确更偏技术一些相对 BA。
2019-11-22 08:31:24 +08:00
回复了 songdg 创建的主题 程序员 当函数需要返回很多变量时的烦恼
话说为何需要有很多返回值?能否从设计上改变呢?好奇
2019-11-22 08:20:50 +08:00
回复了 levelworm 创建的主题 程序员 职场求助,想从 BA 转 BI,求问应该如何准备?
@cqcn1991 多谢 其实我们公司数据工程师和 bi 是分开的,是我把他们混在一块了。bi 就是开会,收集需求,做数据仓库,然后做可视化图表。
2019-11-22 08:18:28 +08:00
回复了 levelworm 创建的主题 程序员 职场求助,想从 BA 转 BI,求问应该如何准备?
@Justin13 多谢,您后面说的似乎有点深,感觉要写数据库引擎,不过可能您指的是类似 spark, paquet 这些的原理,我水平不足可能得从安装 spark 和学 pyspark 开始。我先看看 semantic model 是个什么东西。
2019-11-22 05:17:56 +08:00
回复了 pibicha 创建的主题 程序员 被强拉来做 Olap 系统,求大佬指点怎么搞
@fireapp 同意,基本上这种系统都是两部分,一部分是 Monitoring 性质的,直接做成 Dashboard,如果效率不够高就要想办法预先 aggregate 等等。还有一部分是 Analysis 性质,其实不应该是楼主管,其他部门应该有 BA/DA,但是需要楼主做好数据仓库,否则查询起来要死了。
2019-11-22 05:12:27 +08:00
回复了 pibicha 创建的主题 程序员 被强拉来做 Olap 系统,求大佬指点怎么搞
DWH 的话 PostgreSQL 怎么样?这也是免费的,不过不知道你们数据量,以及原先存储在哪里。
2019-11-22 05:08:59 +08:00
回复了 pibicha 创建的主题 程序员 被强拉来做 Olap 系统,求大佬指点怎么搞
这不就是 BI 么?首先分析需求,就是看有啥报告要出的,然后 ETL 进数据库做数据仓库,最后接 Tableau 或者 Power BI 出报告。Clickhouse 不熟,也许能够直接拿来用?我记得它本身适合做 OLAP。

Tableau 的话可能需要 ODBC Driver,Power BI 查了下应该也是如此。

这活可是我梦想的活,可惜没机会做。
2019-10-31 07:22:31 +08:00
回复了 clecho 创建的主题 程序员 诸位公司项目的代码质量高吗?
@toyuanx 取其精华会不会最后就是注释基本没有 + 半天才理清楚 + 不注意缩进 + 冗余 + 没法交流。。。
一个办法是,如果没结婚的话可以去公司学习,我觉得公司的环境比家里头舒服。
@hmzt 这块我看过一点东西,印象最深刻的就是怎么用 two passes 来读入函数信息,比如说 parameter 和 local variable。觉得的确是聪明啊。。。
@kele1997 多谢,没想到炸出来这么多牛人。。。
@favourstreet 多谢,不过这要求离我很远,我慢慢来,先写个简单的解释器。。。不过能想象出来会很有成就感。
@salamanderMH 多谢!看了一下目录的确也不错,步子似乎小一些
@zjsxwc
多谢啊,这本书我听好几个人说起来了,看来是经典。
Context free grammar 我是不是也要搞一下?不过那本书里头有了。
2019-08-03 21:51:14 +08:00
回复了 TheWalkingDead 创建的主题 程序员 29+岁的程序员,除了工作,平时还能培养什么爱好?
你们程序员多好啊,我业余爱好就是搞点数据库写点代码,你们上班就能玩这些了,工资还不错。

看到楼主准备做量化了,建议楼主量力而行啊,先弄点小钱。
工作量太大了,出事是正常。天天加班几个小时哪里有不出事情的。这事情主要责任在你们公司。不是你出问题就是其他人出问题。。。
1 ... 194  195  196  197  198  199  200  201  202  203  
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   1651 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 41ms · UTC 16:49 · PVG 00:49 · LAX 08:49 · JFK 11:49
Developed with CodeLauncher
♥ Do have faith in what you're doing.