大数据技术整理

素颜马尾好姑娘i 2022-01-23 14:17 465阅读 0赞

目录

一. Hadoop

Hadoop

Yarn

MapReduce

Hdfs

CDH|Cloudera Manager

二. 数据分析

Hive

Impala

三. 离线和实时数据处理

Flink

Spark

Storm

Kafka

四. OLAP分析平台

Kylin

五. 日志数据采集工具

Flume

ELK(Elasticsearch、Logstash、Kibana)

六. ETL工具

Sqoop

七. Nosql数据库

Hbase

Redis

Mongo

Cassandra

InfluxDB

OpenTSDB

八. 调度平台

Azkaban

九. RDBMS数据库

Mysql


一. Hadoop

Hadoop

Yarn

MapReduce

Hdfs

CDH|Cloudera Manager

二. 数据分析

Hive

hive数据倾斜优化策略

Hive的性能优化以及数据倾斜

Impala

三. 离线和实时数据处理

flink流处理访问mysql

Flink自定义DataSource之MysqlSource

批处理和流处理

Spark

批处理和流处理

Storm

批处理和流处理

Kafka

Kafka实践

四. OLAP分析平台

Kylin

大数据分析界的“神兽”Apache Kylin有多牛?

五. 日志数据采集工具

Flume

Flume学习之路系列

ELK(Elasticsearch、Logstash、Kibana)

六. ETL工具

Sqoop

七. Nosql数据库

Hbase

Hbase的应用场景、原理及架构分析

Hbase原理、基本概念、基本架构

HBase的RowKey设计

HBase学习之六: hbase的预分区设计

Rowkey设计

HBase RowKey散列和预分区

hbase建表时region预分区的方法

Hbase实践

Hbase实践之结合Spring

Redis

Mongo

Cassandra

InfluxDB

OpenTSDB

八. 调度平台

Azkaban

九. RDBMS数据库

Mysql

发表评论

表情:
评论列表 (有 0 条评论,465人围观)

还没有评论,来说两句吧...

相关阅读

    相关 数据基础整理

    1. 什么是大数据,大数据有哪些特点? 大数据是指数据规模大,尤其是指由于数据形式多样性,非结构化特征明显,导致数据存储,处理和挖掘异常困难的那类数据集;特点:Volume

    相关 数据开源框架整理

    引言 主要基于对现阶段一些常用的大数据开源框架技术的整理,只是一些简单的介绍,并不是详细技术梳理。可能会有疏漏,发现再整理。参考的太多,就不一一列出来了。这只是作为一个梳理,

    相关 数据技术

    大数据技术 2010年前后(第三次信息化浪潮),物联网、云计算、大数据相关技术的产生,以解决信息爆炸问题。 -------------------- 一、基本概念