首页实战大数据硬核技能进阶 Spark3实战智能物业运营系统

收藏

大数据硬核技能进阶：Spark3实战智能物业运营系统

打通大数据领域最吃香的离线处理核心技能及生态，成为拥有真正实力前沿人才

￥599.00

已完结难度中级时长 43小时学习人数 59 综合评分 10.00

立即购买加购物车

套餐1
套餐2

零基础，玩转大数据核心框架

套餐价格：¥2,209.00

2门课总价：¥2,598.00

中级 · 59人报名 ¥599.00

初级 · 58人报名 ¥1999.00

玩转spark3

套餐价格：¥629.00

2门课总价：¥698.00

中级 · 59人报名 ¥599.00

初级 · 81人报名 ¥99.00

离线计算作为大数据计算领域领军技能，在成本、稳定性、数据一致性等方面有着绝对优势。吃透Spark离线技术及相关生态，就掌握了大数据工程师的高薪密码。本课程将结合生产级项目，一栈式点亮：数据收集(DataX)、数据湖(Iceberg)、数据分析(Spark)、智能调度(DS)、数据服务(DBApi)、AI大模型(ChatGPT)、可视化(Davinci)等离线处理核心技能及生态体系，带你打通硬核技能，拓宽上升通道。

讲师

资深大数据架构师

课程预览

检测到您还没有关注慕课网服务号，无法接收课程更新通知。请扫描二维码即可绑定

课程目标

唯有具备硬核技能，才能在大数据领域拥有绝对竞争力

课程亮点

从入门到进阶，构建完整的 Spark 离线处理+生态技术体系

真场景，全流程， AI大模型，手把手教学，倍增真实开发经验

项目简介：

以企业目前运行项目为设计载体，构建智能物业运营系统，各大环节从真实需求场景角度逐步拆分实现，从架构设计到开发落地，多次迭代优化，高度还原企业项目开发流程。还会引入当下最热门的AI大模型实现之ChatGPT来为我们的日常开发赋能，提升开发效率的同时，增强质量保障。

项目架构图：

项目效果图：

课程大纲

第1章大厂技术首选高薪必备：揭开Spark神秘面纱

Spark是当下在企业级开发中使用频率最高、最火热的分布式计算引擎之一，是我们必须要掌握的框架之一，本章节将带领大家一起了解Spark的特点、为后续深入学习打好基础。强调学习的方法论，以不变应万变。

第2章工欲善其事必先利其器：大数据框架环境部署

带领大家在CentOS系统上进行常用大数据框架进行部署及构建本地开发环境

第3章手把手撸个RDD实战：加强基础为Spark预热

在正式学习Spark之前，本章将带领大家对Java和Scala中的迭代器进行深入讲解，并进行封装，开发一套自己的简易RDD的实现，统一接管各种不同数据源的接入及处理，为后续学习RDD打下坚实的基础

第4章轻松理解RDD核心本质：结合源码多维度解析

RDD是整个Spark的核心与基石，是面试Spark相关岗位时必考点，也是后续学习过程必须要掌握的技术点。本章将带领大家通过阅读源码深度分析RDD的各种特性，让大家知其然知其所以然

第5章快速步入核心编程基础：RDD转换与动作编程

本章节将带领大家彻底掌握基于RDD开发过程中的三部曲：创建、转换、执行，在讲解算子使用的过程中通过源码分析，掌握Spark的编程。

查看完整目录

专属服务

每个慕课网课程，都是一个专业的技术社区

个性化增值服务，学习有保障更高效

答疑专区+技术社区

连百度谷歌都搜不到的问题，在这里讲
师都将耐心详细解答，更有小伙伴一起
交流互动，共同进步。

课程全套代码下载

提供课程全套源代码下载，包含：
全套组件封装镜像、私有仓库、各个服
务的镜像、项目源代码。

独家“动态”教辅材料

丰富的专属教辅资料上传更新，通过课程
教案、原理图解、技术文档、演示案例等
各种教材，保障你的学习效果。

精美设计文件

项目中用到的UI图素也将打包赠送，助
你的项目展示更加美观、得体，更直观
地展示你的能力，吸引考察者目光。

适合人群

希望提升大数据综合能力的开发者

希望突破岗位局限性的开发者

技术储备

熟悉Scala基础

熟悉Linux基础

了解Hadoop基础

环境参数

Hadoop 3.3.2

Spark 3.4.0

Iceberg 3.3.2

Hive 3.1.2

DolphinScheduler 3.1.8

DataX 2023

DBApi 4.0.7

Davinci 0.3

提问

数据加载中...

意见反馈帮助中心 APP下载