主要内容

· Linux操作系统· MySQL与SQL· Kettle与BI工具· 电商运营指标分析

可掌握的核心能力

1. 掌握MySQL数据库的使用；
2. 掌握SQL语法；
3. 掌握Kettle数据迁移工具的使用；
4. 熟练使用BI可视化工具；
5. 对数据开发有一定认知，掌握BI工程师所具备的基本技能。

主要内容

· 大数据开发Hadoop基础· Hive基础· Hive进阶

可掌握的核心能力

1.掌握Linux常用命令，为数据开发后续学习打下的良好基础；
2.掌握大数据的核心框架Hadoop以及其生态体系，完成HDFS、MapReduce及Yarn机制基本理解与使用；能顾搭建Hadoop高可用HA集群；
3.掌握Hive的使用和调优；
4.具备Hadoop开发能力、离线数据仓库开发能力；
5.能够完成基本构建企业级数仓。

主要内容

· 大数据部署运维：Cloudera Manager · 分析决策需求：数据仓库 · 数据采集：DataX · 数据分析：Hive· 数据调度：Dolphinscheduler · OLAP系统存储：PostgreSql · Fine Report数据报表与大屏· 数仓建模: 范式与维度建模
· 五大核心主题域开发: 销售域、供应链域、会员域等

可掌握的核心能力

1.掌握泛电商行业离线数仓的分层与建模，从需求、设计、研发、测试到落地上线的完整项目流程；
2.行业内首个深度讲解数仓建模模型方案的主体项目；
3.包括海量数据场景下如何优化配置；
4.掌握项目迁移能力，能够将项目迁移至泛电商的各个领域；
5.掌握在泛电商行业中关于全量与增量数据处理模式；
6.提供泛电商行业下的数据存储分析以及服务监控方案。

主要内容

· 大数据部署运维：Cloudera Manager· 分析决策需求：数据仓库 · 数据采集：sqoop · 数据分析：Hive · 分组完成项目

可掌握的核心能力

1.掌握教育行业离线数仓的分层与建模，从需求、设计、研发、测试到落地上线的完整项目流程；
2.真实业务逻辑，共涉及20多个主题，100多个指标，提升学员在教育行业中的核心竞争力；
3.包括海量数据场景下如何优化配置；
4.拉链表的具体应用；
5.新增数据和更新数据的抽取和分析；
6.Hive函数的具体应用；
7.ClouderaManager可视化、自动部署和配置、Git、CodeReview功能。

主要内容

· Python基础语法· Python面向对象· Python高级语法· Python多任务编程· Python网络编程

可掌握的核心能力

1.掌握Python开发环境基本配置；
2.掌握运算符、表达式、流程控制语句、数组等的使用；
3.掌握字符串的基本操作；
4.初步建立面向对象的编程思维；
5.熟悉异常捕获的基本流程及使用方式；
6.掌握类和对象的基本使用方式；
7.知道多进程多线程的原理。

主要内容

· ETL概念与工具· ETL项目需求分析· ETL项目架构设计· Python ETL实战

可掌握的核心能力

1. 掌握ETL的相关概念；
2. 掌握基于Python语言完成ETL任务开发实战；
3. 基于ETL实战锻炼Python编程能力，包括（元数据管理、数据模型、项目配置、单元测试、工具方法抽取等）；
4. 掌握BI数据分析实战。

主要内容

· BI报表开发需求分析· BI报表工具· FineReport报表入门· 泛电商行业五大主题的实现

可掌握的核心能力

1.掌握BI报表开发需求分析；
2.掌握BI报表工具；
3.掌握FineReport报表。

主要内容

· 大数据Spark技术栈· SparkSQL数据处理与统计分析· Spark案例实战

可掌握的核心能力

1. 掌握Spark的RDD、DAG、CheckPoint等设计思想；
2. 掌握SparkSQL结构化数据处理，Spark On Hive；
3. 掌握Structured Streaming整合多数据源完成实时数据处理；
4. 具备Spark全栈开发能力，满足大数据行业多场景统一技术栈的数据开发，提供就业核心竞争力。

主要内容

· SparkSQL整合ES自定义数据源· DS任务界面化调度· 用户画像标签构建规则· 用户画像规则类标签构建· 用户画像统计类标签构建

可掌握的核心能力

1.掌握SparkSQL整合ES自定义数据源；
2.掌握用户画像构建流程；
3.掌握用户画像标签构建规则；
4.掌握用户画像规则类标签构建；
5.掌握用户画像统计类标签构建。

主要内容

· 多场景画像标签项目实战· 基于Spark全栈技术构建企业级大数据开发平台

可掌握的核心能力

1.掌握保险行业数据分析流程；
2.掌握保费计算流程；
3.掌握DS调度流程。

主要内容

· ChatGPT生成代码· ChatGPT改Bug· 基于AI大模型的出行大数据平台数仓搭建· 基于AI大模型指标开发

可掌握的核心能力

1.完成ChatGPT基础使用；
2.基于ChatGPT可以完成改Bug，写注释，生成代码等常见编程任务；
3.能够基于合理的Prompts提示词进行提问，助力提升编程效率。

主要内容

· 核心技能知识点以及常见面试题强化学习

可掌握的核心能力

1.强化面试就业核心面试题；
2.梳理大数据架构及解决方案；
3.剖析多行业大数据架构。

主要内容

· 阿里云Flink入门· Flink SQL· Flink作业开发· 阿里云FLink运维

可掌握的核心能力

1.掌握基于阿里云Flink进行实时和离线数据处理、分析；
2.掌握基于阿里云Flink的多流并行处理技术；
3.掌握FlinkCDC多数据源采集技术。

主要内容

基于Flink + Kafka + Paimon 湖仓一体技术架构，实现在线视频行业大规模流数据处理和实时分析。本项目依托 阿里云 Flink 流处理计算引擎， 通过 FlinkCDC 实时采集 RDS MySQL 数据库数据，实现数据采集的断点续传，使用Kafka 作为实时数仓，使用 Paimon 实现数据的持久化和Flink 批处理，实现计算的流批一体，数据存储的湖仓一体，采用StarRocks对接DataV完成实时业务大屏展示。

可掌握的核心能力

1.湖仓一体化解决方案基于Flink+Paimon湖仓一体技术架构；
2.基于FlinkCDC完成MySQL等数据源的数据采集；
3.FlinkSQL流批一体架构实现实时数据计算；
4.使用StarRocks进行海量多维分析；
5.掌握数据报表分析；
6.掌握业务数据实时大屏场景实现。