大数据框架图谱（总览）

野性酷女 2022-05-29 12:10 152阅读 0赞

## 前言 ##

加入大数据开发加起来也差不多快1年多的时间了。最近的时间比较空余，正好把所有的大数据开源框架都总结一下。

--------------------

### Hadoop & Hive & Pig & HBase ###

--------------------

### Kafka ###

关注的社区:  
\[1\]. [Kafka 官方][Kafka]  
\[2\]. [orchome社区][orchome]

关注博客:  
\[1\]. [Github-jasongj][]  
\[2\]. [CSDN-朱小厮][CSDN-]  
\[3\]. [Github-刘正阳][Github-]

好文推荐:  
\[1\]. [kafka学习笔记：知识点整理][kafka]  
\[2\]. [Kafka 源码分析1 : 基础搭建和项目结构介绍][Kafka _1 _]

--------------------

### ZooKeeper ###

关注的社区:  
\[1\]. [ZooKeeper 官方][ZooKeeper]

关注博客:  
\[1\]. [ZooKeeper(朱哥的全栈历险记) ][ZooKeeper_]

--------------------

### Spark ###

### MongoDB ###

--------------------

### Redis ###

关于Redis，主要需要关注如下几点:

*  Redis 安装
 *  Redis 基本命令运行
 *  Redis 哨兵机制与选举
 *  Redis 集群
 *  Redis 存储与持久化(AOF DB)
 *  Redis Jedis接口
 *  Redis & Spark Streaming
 *  (待更新) Redis 数据库设计(如何将数据库表放入Redis)
 *  (待更新) Redis 性能分析 & Redis调参
 *  (待更新) Docker 运行Redis & 主从 & 集群
 *  (待更新) Redis 更新策略
 *  (待更新) Redis 内存失效策略
 *  (待更新) Redis-Search
 *  (待更新) Spring-Redis
 *  Memcache
 *  xetorthio(facebook开源 管理Memcache&Redis)

关注的社区:  
\[1\] 官方网站：[https://redis.io/][https_redis.io]  
\[2\] 知乎社区： [https://www.zhihu.com/search?type=content&q=redis][https_www.zhihu.com_search_type_content_q_redis]  
\[3\] 中文站 [http://www.redis.net.cn/][http_www.redis.net.cn] | [http://redis.cn/][http_redis.cn] | [http://www.runoob.com/redis/][http_www.runoob.com_redis]  
\[4\] Redis作者 [http://oldblog.antirez.com][http_oldblog.antirez.com]

经典文章:

\[1\] (Redis作者)Redis使用优点和案例分析  
[http://oldblog.antirez.com/post/take-advantage-of-redis-adding-it-to-your-stack.html][http_oldblog.antirez.com_post_take-advantage-of-redis-adding-it-to-your-stack.html]  
[http://database.51cto.com/art/201107/276333.htm][http_database.51cto.com_art_201107_276333.htm]

Demos:

*  内存 存取数据
 *  消息队列
 *  存取Session
 *  分布式锁
 *  管道
 *  缓存失效 & 模糊匹配某条记录

[Kafka]: http://kafka.apache.org/
[orchome]: http://orchome.com/
[Github-jasongj]: http://www.jasongj.com
[CSDN-]: https://blog.csdn.net/u013256816
[Github-]: https://liuzhengyang.github.io/2018/02/21/kafka-source-5-kafka-consumer/
[kafka]: http://www.importnew.com/23199.html
[Kafka _1 _]: http://www.importnew.com/28761.html
[ZooKeeper]: https://zookeeper.apache.org/
[ZooKeeper_]: https://segmentfault.com/a/1190000012185938
[https_redis.io]: https://redis.io/
[https_www.zhihu.com_search_type_content_q_redis]: https://www.zhihu.com/search?type=content&q=redis
[http_www.redis.net.cn]: http://www.redis.net.cn/
[http_redis.cn]: http://redis.cn/
[http_www.runoob.com_redis]: http://www.runoob.com/redis/
[http_oldblog.antirez.com]: http://oldblog.antirez.com
[http_oldblog.antirez.com_post_take-advantage-of-redis-adding-it-to-your-stack.html]: http://oldblog.antirez.com/post/take-advantage-of-redis-adding-it-to-your-stack.html
[http_database.51cto.com_art_201107_276333.htm]: http://database.51cto.com/art/201107/276333.htm