大数据离线分析实战

素颜马尾好姑娘i 2024-04-08 10:07 72阅读 0赞

【课程简介】

本次课程将结合大数据行业技术栈现状，为大家讲解企业中常用的离线分析。从如何使用大数据管理平台Cloudera Manager，到主流常用的分析模型，由浅入深逐步介绍，零基础小白也能听懂，对大数据感兴趣的小伙伴不要错过。

【课程教程】[大数据离线分析实战][Link 1]

【主讲内容】

1.快速上手大数据管理平台CM

2.详解主流离线分析引擎Presto

3.大数据离线分析常用分析模型

【主讲教师】

金牌讲师：李老师  
高级研发工程师，名校计算机硕士，有丰富的大型项目实战经验。曾参与过中国移动资产管理、中石油数据分析系统研发。对MySQL,Hadoop,Hive,Spark，Flink等技术有深入研究。

### 1、大数据管理平台：Cloudera Manager ###

**大数据生态圈**

![255a303ab340448cad737e987a1c3263.png][]

**Cloudera Manager**

Cloudera Manager(简称CM)是Cloudera公司开发的一款大数据集群安装部署利器.

这款利器具有集群自动化安装、中心化管理、集群监控、报警等功能，使得安装集群从几天的时间缩短在几小时以内，运维人员从数十人降低到几人以内，极大的提高集群管理的效率。

cloudera manager有四大功能：

（1）管理：对集群进行管理，如添加、删除节点等操作。

（2）监控：监控集群的健康情况，对设置的各种指标和系统运行情况进行全面监控。

（3）诊断：对集群出现的问题进行诊断，对出现的问题给出建议解决方案。

（4）集成：对hadoop的多组件进行整合。

![b579a45e9ecd48ac8885a1afb359c403.png][]

**大数据分析引Presto****大数据分析引擎Presto**

### 2、大数据分析引擎**Presto** ###

**Presto**

![fda55b7a6dd8420b94e74812f4ce1b48.png][]

![2bc7cc9a71a6415d99f8ccf74e199b8e.png][]

![40368ca53c3548c3a2a7da4b0aa401c9.png][]

![18f5191635a4478b826d3bc75b4859a1.png][]

### 3、大数据离线分析模型 ###

**分析模型**

![e62b4950a8344d69a7c08cda3613fb15.png][]

![5e59d878e7ad444d8a9de180306eb0aa.png][]

**分析模型**

https://tech.meituan.com/2017/05/26/hotel-dw-layer-topic.html

https://mp.weixin.qq.com/s/CfxNcMJIl6irunrTNTs25g**大数据管理平台**

![d9e9f1b1c7c34c459c3a7dc4df01982a.png][]

**都汇聚大数据管理平台**

**Cloudera Manager**

[Link 1]: http://yun.itheima.com/open/783.html
[255a303ab340448cad737e987a1c3263.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/08/f048388c84d74248a81c0b1a824d0e3d.png
[b579a45e9ecd48ac8885a1afb359c403.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/08/d3b39b0a70f94e06b1decd91d6c4dbc7.png
[fda55b7a6dd8420b94e74812f4ce1b48.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/08/2a5289ad5d49427a8c8d7cab6be790d5.png
[2bc7cc9a71a6415d99f8ccf74e199b8e.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/08/c297b526c8f8423f87f5e0b7f7e67c78.png
[40368ca53c3548c3a2a7da4b0aa401c9.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/08/59acc6bd171f4b089573bb4893771076.png
[18f5191635a4478b826d3bc75b4859a1.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/08/c8b3894c0e3244148cdb424d333e2f67.png
[e62b4950a8344d69a7c08cda3613fb15.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/08/be30428b848145a494fe4b437be03bab.png
[5e59d878e7ad444d8a9de180306eb0aa.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/08/6b2cf03947b3432b80dcbdd33b92d9a1.png
[d9e9f1b1c7c34c459c3a7dc4df01982a.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/08/da4c8fbb53cc4b1192a54a7c83e8b4bb.png