首页 实战 多层次构建企业级大数据平台, 成就全能型大数据开发
收藏

多层次构建企业级大数据平台, 成就全能型大数据开发

引擎层+平台能力层+数据应用层,全流程实战,进击集群“管理者”、数据处理“执行者”、数据价值“发现者”

多层次构建企业级大数据平台, 成就全能型大数据开发

¥599.00
已完结 难度 高级 时长 42小时 学习人数 147 综合评分 10.00
从Hadoop实践到平台建设
套餐价格:¥1,529.00
2门课 总价:¥1,798.00
立即购买
一站式数据平台建设
套餐价格:¥946.00
2门课 总价:¥1,047.00
立即购买
企业级数据平台核心服务建设及落地
套餐价格:¥696.00
2门课 总价:¥767.00
立即购买

岗位越细分,职业上升通道局限性越大。本课程通过构建多层次企业级大数据平台,带你开拓架构思维,掌握“全能型”技能体系,综合提升集群管理+平台能力层建设+数仓建设+数据应用实战能力,助力你尽早成为驾驭“多赛道” 的 “全能型” 大数据技术人才,获得岗位自由切换和晋升的 “优先权” 。

叁金
讲师

大数据研发工程师

检测到您还没有关注慕课网服务号,无法接收课程更新通知。请扫描二维码即可绑定
重新观看

从0到1,多阶段分层构建大数据平台核心
助力获得多岗位自由切换和晋升优先权

集群监控与治理
提高集群管理效率
实战自动部署程序,支持多种Hadoop生态的
大数据组件自动部署
掌握Prometheus监控组件应用,对Hadoop
集群进行重点指标监控
掌握HDFS存储和YARN任务健康度分析及评
分策略
实战集群管理平台,增强集群管理和优化能力
数据采集与处理
打通平台数据处理全流程
掌握企业常用的数据采集、数据计算、数据开
发、任务调度领域开源大数据组件应用,逐步
构建数据平台能力层
实战数据资产统一视图,一栈式打通元数据采
集、编目和管理
实战统一查询分发服务,打造支持多集群、多
引擎的数据查询中间件
数据落地及应用
技术&业务“两手抓”
结合数据可视化服务(superset),实现母婴
销售数据的BI分析
理论+实践结合,基于ClickHouse打造当前主
流方案的数据标签平台
需求入手,实战用户营销标签数据存储最优解
业务应用落地实现用户标签查询、分群、人群
营销等基础业务场景

6大纬度,高效构建你的“全能型”技能体系

“自动部署-监控管理-能力建设-数据应用”全流程数据平台落地
综合提升企业级项目架构设计及构建能力

集海量数据存储、数据采集、数据处理、任务调度、数据开发、数据应用于
一体的大数据平台是各个公司进行大规模数据处理所必备的基础能力。
阶段一:搭建大数据平台
做集群的管理者
阶段二:数据采集与处理
做数据处理的执行者
阶段三:数据落地及应用
做数据价值的发现者
基于集群部署、监控运维、集群健康度分
析、集群治理等维度,推动集群管理
掌握Hadoop等组件的自动部署程序
掌握Prometheus集群监控方案,并覆盖
Hadoop重点监控指标
掌握HDFS数据治理策略,提高集群健康度
应用Yarn任务计算治理,实现集群资源降
本增效
实践多类Hadoop测试工具,跑通Hadoop
上线全流程
引擎研发工程师
平台运维工程师
第1章 你好,大数据平台!
大数据平台不是一个单一的项目,而是多个大数据组件融合而成的一个平台,是海量数据处理的全流程工厂。本章我们会站在大数据工程师的角度认识大数据平台,了解大数据平台的核心内容,逐步构建大数据平台的认知体系。
第2章 大数据平台的地基:快速搞定Hadoop集群安装部署
大数据平台一般都基于Hadoop集群进行搭建,所以对于大数据集群的部署是搭建大数据平台的第一步。本章通过对大数据组件安装逻辑进行抽象、设计,实战开发Hadoop集群自动部署的项目,支持Hadoop集群的自动部署,并可以扩展其他大数据组件。
第3章 平台基础模块之监控和预警
监控系统是大数据平台的标配,监控的目的在于能够捕获异常指标预防大数据集群出现问题,以及发现问题后及时处理,保障集群稳定。
第4章 平台底层引擎之HDFS存储治理
分析HDFS元数据,结合多种策略推进HDFS数据治理,提高HDFS存储服务的稳定性和空间利用率。
第5章 平台底层引擎之YARN计算治理
计算资源总是有限的,既要利用Yarn队列划分能力进行资源划分,又需要对用户的任务进行分析优化,提高集群资源的利用率。
查看完整目录

每个慕课网课程,都是一个专业的技术社区

个性化增值服务,学习有保障更高效

答疑专区+技术社区
连百度谷歌都搜不到的问题,在这里讲
师都将耐心详细解答,更有小伙伴一起
交流互动,共同进步。
独家“动态”教辅材料
丰富的专属教辅资料上传更新,通过课
程教案、原理图解、技术文档、演示案
例等各种教材,保障你的学习效果。
课程全套代码下载
提供课程全套源代码下载,包含:
全套组件封装镜像、私有仓库、各个服
务的镜像、项目源代码。
实用电子文档
部分简单内容以图文形式呈现,与视频相
配合,既保障学习效果,又提高了学习效
率。
适合人群
准备进入大数据行业的开发者
希望提升大数据综合能力的开发者
希望突破岗位局限性的开发者
技术储备
熟悉Java基础,了解SpringBoot基本应用
了解Linux系统基本使用,可熟练安装软件
了解常用大数据组件基础应用如Hadoop等
大数据基础相关,《轻松入门大数据:一站式完成核心能力构建》 https://coding.imooc.com/class/582.html 可以帮你轻松筑基
环境参数
Hadoop 3.2.1
Spark 2.4.0
Presto 0.277
Hive 3.1.2
DolphinScheduler 3.1.3
SeaTunnel 2.1.0
ClickHouse 23.2.4
提问
数据加载中...
微信客服

购课补贴
联系客服咨询优惠详情

帮助反馈 APP下载

慕课网APP
您的移动学习伙伴

公众号

扫描二维码
关注慕课网微信公众号

学习咨询

选课、学习遇到问题?

扫码添加指导老师 1V1 帮助你!

添加后老师会第一时间解决你的问题