首页 实战 玩转热门框架 用企业级思维 开发通用够硬的大数据平台
收藏

玩转热门框架 用企业级思维 开发通用够硬的大数据平台

针对每个模块,提供成熟的选型视角与详细讲解,一次学习掌握大数据项目开发通用技术

玩转热门框架 用企业级思维 开发通用够硬的大数据平台

¥448.00
难度 中级 时长 15小时 学习人数 475 综合评分 9.98
一站式数据平台建设
套餐价格:¥946.00
2门课 总价:¥1,047.00
立即购买
通用数据平台构建及智能化进阶
套餐价格:¥556.00
2门课 总价:¥616.00
立即购买

从企业需求入手,构建集数据采集、数据存储、数据处理与分析、BI应用、权限管理、系统监控等于一体的大数据应用平台,帮助我们快速掌握大数据平台开发技术,迅速建立大数据技术的宏观的认识。

叁金
讲师

大数据研发工程师

课程预览

检测到您还没有关注慕课网服务号,无法接收课程更新通知。请扫描二维码即可绑定
重新观看

基于大厂主流架构方案 建立通用型企业级数据平台

原理+实战+面试 带你一次学习掌握大数据项目开发通用技术

大厂思想更值钱
分析大厂架构方案
寻找共性、取长补短
构建够硬的通用数据平台
通用技术更保值
数仓权限/治理/调度
计算/查询/监控
通用&主流的技术栈
助你职场增值
技术思维双提升
技术基础+优化技巧
场景应用+面试答疑
内容丰富的课程
让实力全面提升

讲解五大模块 带你一课了解主流大数据平台开发过程

覆盖通用型大数据平台开发的重点模块 理解各个模块的设计思想和解决方案

通过真实开发场景认识并理解各个模块的

设计思想&解决方案

权限管理

Ranger集中管理
HDFS、Hive
多组件&细粒度
权限控制

任务调度

形成多任务依赖链
组织执行计划
定时触发+失败报警

计算引擎

Spark
实现高性能
提高并行度
结果复用/算子优选

查询分析

快速查询
多数据源查询
Presto On Yarn部署

集群监控

Open-Falcon
服务监控
资源监控
避免浪费

一个完整项目 带你建立大数据技术大局观

俯瞰全项目 理解通用型平台架构思想 细数各组件 掌握大数据开发高频技术

常用架构分析选型 逐层深入打造大数据开发知识体系

全局认识大数据开发流程 技术选型+思想提升+开发技能 全都能学到

离线数仓建设
常用的分层建设方案
Hive参数调优
执行流程
实时数仓架构
离线到实时的历程
Lambda/Kappa架构分析
大厂实时数据仓架构对比
安全权限
Hadoop/Hive自带认证
Kerberos服务认证对比
Apache Ranger
权限控制
数据采集及治理
常用数据采集工具介绍
DataX实战操作
作业调度
主流调度框架Azkaban
部署Azkaban服务
调度实战操作
计算/查询引擎
Spark调优策略
Presto配置优化
Presto On Yarn模式部署
集群监控
监控预警方案介绍
Open-Falcon
Hadoop/Presto监
控信息采集

学员专享增值服务

问答专区
关于课程的问题都可在问答区随时提问,讲师会进行
集中答疑
源码开放
课程案例代码完全开放给你,你可以根据所学知
识,自行修改、优化

环境参数

  • Hadoop 2.8.5
  • Hive 2.3.6
  • 数据安全框架 Apache Ranger 1.2.0
  • Spark 2.4.4
  • Azkaban 3.81.0
  • Presto 0.213
  • 监控告警框架 OpenFalcon v0.3
  • JPA 1.0.2
  • Java框架 SpringBoot 2.1.3

万事俱备 只等你来

  • 舍离刀

    好评

    跟着老师学完了《HBase+Spring Boot实战分布式文件存储》,自己又看了两遍,收获了很多。这期间一直在麻烦老师,老师也是很耐心的给解决,是我在慕课平台遇到的最有耐心的老师。《玩转热闹框架》目前还没有学完,内容比较多,对于我来说会有难度,但会跟着老师继续学习。

  • 慕设计8554713

    好评

    才知道“大数据平台”不仅仅是数仓那么简单。感觉自己之前的格局太小了,就扑到细节上。自上而下的角度去理解,竟然发现了很多之前学习过程中忽略掉的东西。更特别地是,我发现这种学习方法能够帮助我维持较长时间的学习兴趣,不会阶段性地产生厌烦情绪。感谢老师~

  • qq_大脸猫爱吃小鱼头_0

    好评

    主要是想看看大数据的全貌,老师提供了一个很完整的全貌图,目前还没有学完,但是已经收获很多了,最近刚好要面试, 我也趁着这个机会好好的复习一下大数据平台相关的知识,拾起之前遗漏的知识

查看全部239条用户评价
提问
数据加载中...
意见反馈 帮助中心 APP下载
官方微信

学习咨询

选课、学习遇到问题?

扫码添加指导老师 1V1 帮助你!

添加后老师会第一时间解决你的问题