JavaEE鸿蒙应用开发HTML&JS+前端Python+大数据开发人工智能开发电商视觉设计软件测试新媒体+短视频直播运营产品经理集成电路应用开发(含嵌入式)Linux云计算+运维开发C/C++拍摄剪辑+短视频制作PMP项目管理认证电商运营Go语言与区块链大数据PHP工程师Android+物联网iOS.NET

大数据Hive+Spark离线数仓工业项目实战中级教程

更新日期:2022.05.20

全套视频教程及资料

视频教程技术解析配套源码学习工具学习笔记

一键免费下载

扫码关注,回复关键词,马上领取全套视频资源!

1. 微信扫描二维码,
    关注“黑马程序员”公众号(itheima666)

2. 回复关键词“工业项目”,

即可领取相应全部资源

课程须知

通过大数据技术架构,解决工业物联网制造行业的数据存储和分析、可视化、个性化推荐问题。一站制造项目主要基于Hive数仓分层来存储各个业务指标数据,基于sparkSQL做数据分析。核心业务涉及运营商、呼叫...

  1. 课程介绍
  2. 课程目录
  3. 课程评论

课程简介:

通过大数据技术架构,解决工业物联网制造行业的数据存储和分析、可视化、个性化推荐问题。一站制造项目主要基于Hive数仓分层来存储各个业务指标数据,基于sparkSQL做数据分析。核心业务涉及运营商、呼叫中心、工单、油站、仓储物料。


讲解方式:

真项目真实站。让有经验的工程师也能有所收获


本视频主要面向的群体是:

* 有Python基础

* 有Hadoop生态体系基础

* 有Spark基础

* 想要更加深入学习大数据内存计算相关知识、并掌握实战项目开发


课程亮点:

一站制造项目基石与前瞻、数据仓库建模方法 离线数仓分层、Sqoop数据存采集、数仓ODS&DWD层建设、数仓DWS维度层建设、数仓DWB指标层建设、数仓ST主题层建设、一站制造任务调度、Prometheus概述 实现linux服务器监控 实现MySQL服务监控 实现Flink服务监控 Grafana监控看板。一站制造:运营ciss系统、oa系统、erp系统一体化智能制造大数据分析系统


课程内容:

1.使用主流的Hive+Spark构建离线数仓

2.基于完整的工业业务背景实现的离线和实时大数据业务丰富地地图展示可视化开发

3.基于Airflow完成大数据调度任务

4.学会使用Spark SQL处理复杂业务完整的离线采集 + 实时采集方案

5.掌握如何使用调度平台调度T+1批处理任务Spark离线任务和实时任务整合,统一由YARN做资源管理


Slogan:

通过项目实战强化Spark技术构建企业级大数据平台能力


更多章节请下载完整视频观看 >>
综合评分5.0

0人已评分

我也要评分

评论打分
你觉得老师讲的怎么样?

评论字数不能超过100字,还剩个字符

发表评价