多层次构建企业级大数据平台, 成就全能型大数据开发
多层次构建企业级大数据平台, 成就全能型大数据开发
下载地址:https://pan.baidu.com/s/1vZTjWgW-56DIkuQs6Mb4NA 提取码: fafi
给大家分享一套课程——多层次构建企业级大数据平台, 成就全能型大数据开发。
本课程通过构建多层次企业级大数据平台,带你开拓架构思维,掌握“全能型”技能体系,综合提升集群管理+平台能力层建设+数仓建设+数据应用实战能力,助力你尽早成为驾驭“多赛道” 的 “全能型” 大数据技术人才,获得岗位自由切换和晋升的 “优先权” 。
从0到1,多阶段分层构建大数据平台核心
助力获得多岗位自由切换和晋升优先权
集群监控与治理
提高集群管理效率
实战自动部署程序,支持多种Hadoop生态的
大数据组件自动部署
掌握Prometheus监控组件应用,对Hadoop
集群进行重点指标监控
掌握HDFS存储和YARN任务健康度分析及评
分策略
实战集群管理平台,增强集群管理和优化能力
数据采集与处理
打通平台数据处理全流程
掌握企业常用的数据采集、数据计算、数据开
发、任务调度领域开源大数据组件应用,逐步
构建数据平台能力层
实战数据资产统一视图,一栈式打通元数据采
集、编目和管理
实战统一查询分发服务,打造支持多集群、多
引擎的数据查询中间件
数据落地及应用
技术&业务“两手抓”
结合数据可视化服务(superset),实现母婴
销售数据的BI分析
理论+实践结合,基于ClickHouse打造当前主
流方案的数据标签平台
需求入手,实战用户营销标签数据存储最优解
业务应用落地实现用户标签查询、分群、人群
营销等基础业务场景
6大纬度,高效构建你的“全能型”技能体系
“自动部署-监控管理-能力建设-数据应用”全流程数据平台落地
综合提升企业级项目架构设计及构建能力
集海量数据存储、数据采集、数据处理、任务调度、数据开发、数据应用于
一体的大数据平台是各个公司进行大规模数据处理所必备的基础能力。
阶段一:搭建大数据平台
做集群的管理者
阶段二:数据采集与处理
做数据处理的执行者
阶段三:数据落地及应用
做数据价值的发现者
基于集群部署、监控运维、集群健康度分
析、集群治理等维度,推动集群管理
掌握Hadoop等组件的自动部署程序
掌握Prometheus集群监控方案,并覆盖
Hadoop重点监控指标
掌握HDFS数据治理策略,提高集群健康度
应用Yarn任务计算治理,实现集群资源降
本增效
实践多类Hadoop测试工具,跑通Hadoop
上线全流程
引擎研发工程师
平台运维工程师ss