V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
qviqvi
V2EX  ›  程序员

想学大数据,求推荐学习路线,学习资料,测试数据

  •  
  •   qviqvi · 2023-08-25 11:59:55 +08:00 · 1396 次点击
    这是一个创建于 461 天前的主题,其中的信息可能已经有所发展或是发生改变。

    想学一下大数据,感觉比较好找工作

    现在 hadoop 和 hive 刚入门。感觉大数据相关的学习资料好少,求推荐

    另外也求实战项目、测试数据推荐

    3 条回复    2023-08-26 21:24:48 +08:00
    NickYUyu
        1
    NickYUyu  
       2023-08-25 12:25:12 +08:00
    几年工作经验了
    xinxingi
        2
    xinxingi  
       2023-08-25 18:10:45 +08:00   ❤️ 2
    数据开发现状
    我:这次换工作大概投了多少家,接到多少面试
    我朋友:几百家,面试个位数,我个人感觉,有效面试不到 5 家,3 家这样

    先列举大数据必知必会的几个组件给你 Spark(计算引擎)、Flink(计算引擎)、Datax(抽数工具只列举一种)、Hadoop(MR 引擎淘汰,大部分企业不用了,但你要会,这是大数据鼻祖了)、Hive(OLAP)、Clickhouse(OLAP)、Doris(OLAP)、DolphinSchduler(调度比较多只列举一种)、Iceberg 。就先围绕着这些学习吧,JAVA SE 、SCALA 必学,这两门语言在大数据领域很重要。python 会不会看你了,我反正没怎么学,工作中没用到主要。还有以前很火现在逐渐退出历史舞台的我没列举了,毕竟有更好的东西替代。

    近几年 AI 崛起,大数据也要开始摸索 AI 在大数据的应用,这个都还没开始做或者刚开始做,但我估计只是时间问题。

    基本的那些算法要会。

    如果你偏向平台方向,你要会 spring

    如果你偏向业务方向,你要会 BI(比较出名的 BI 报表国内有帆软等、国外 Apache 也有开源 Bi)。
    qviqvi
        3
    qviqvi  
    OP
       2023-08-26 21:24:48 +08:00
    @NickYUyu 两三年后端
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   5774 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 23ms · UTC 06:37 · PVG 14:37 · LAX 22:37 · JFK 01:37
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.