从核心技术到实践应用——你的数据库深度挖掘指南

分手后的思念是犯贱 2022-05-26 09:13 142阅读 0赞

> SDCC系列峰会各站在技术圈遍地花开之余，主办方CSDN为了更好地服务技术开发者并拓展受众，同步启动SDCC 2017系列之线上峰会——线上线下双管齐下，一举打破地域限制，内容为基，便捷加成，带来更友好的听众体验。

数据库作为最关键的基础设施，渗透技术领域的方方面面。随着互联网应用的广泛普及，海量数据的存储及访问成为系统设计的一大痛点。随着各行各业对信息化管理的依赖日益加剧，企业对数据访问的连续性提出了更高的要求，面对纷至沓来的稳定性及高可用需求，数据库技术已然成为各领域信息化建设的关键一环。

2017年12月23日（周六），**[SDCC 2017之数据库技术实战线上峰会][SDCC 2017]**即将强势来袭。作为SDCC系列技术峰会的一部分，本次线上峰会秉承干货实料（案例）的内容原则，邀请了来自阿里巴巴、腾讯、微博、网易等多家企业的数据库专家及高校研究学者，将围绕Oracle、MySQL、PostgreSQL、Redis等热点数据库技术展开，从核心技术的深挖到企业内部实践的剖析，打造精华压缩解析式分享，举一反三，思辨互搏，专为业界同好独家订制。他山之石，可以攻玉，数据库高可用秘辛，抑或是大数据场景下数据库技术的突破方向？你或许都可以在这里找到答案。除此之外，每个演讲时段后均设有答疑交流环节，一对一互动交流。

**日前，数据库技术实战线上峰会也公布了完整版日程及讲师议题超长预告，高能预警，请勿眨眼：**

![图片描述][20171211130900683]

###  ###

讲师&议题介绍

![图片描述][20171211150317398]

李海翔 腾讯金融云数据库技术专家

**演讲主题：MySQL/TDSQL事务处理技术**

**个人简介：**李海翔，网名那海蓝蓝，熟悉PostgreSQL、MySQL、Informix等数据库内核技术。腾讯金融云数据库技术专家。著有《数据库查询优化器的艺术》，被誉为查询优化技术领域的里程碑之作。2017年出版《数据库事务处理的艺术 事务管理与并发控制》，被再次誉为事务处理领域的新里程碑。

**主题简介：**以事务处理技术为主题，全面、系统地分享MySQL的事务处理技术，包括MySQL事务处理技术的系统架构、ACID的实现方式、各种数据异常的避免技术、以及与其他主流数据库在事务处理技术方面的相同与不同之处。

**分享大纲：**

1.  MySQL的事务处理技术概述  
    1.1 事务锁与系统锁  
    1.2 ACID特性实现
2.  MySQL的并发访问控制技术  
    2.1 事务管理模型  
    2.2 一致性  
    2.3 隔离性  
    2.4 原子性和持久性
3.  主流数据库的事务处理技术

**适合人群：**

1.  内核开发人员
2.  DBA
3.  数据库技术爱好者

**听众受益：**

1.  对MySQL数据库的事务处理技术能全面、系统地进行掌握和了解
2.  能深入了解主流数据库与MySQL事务处理方面的异同

![图片描述][20171211150443840]

马进 网易数据库中间件负责人

**演讲主题：DDB进化论：从数据库到数据中心**

**个人简介：**马进，来自网易杭研大数据平台组，入职以来先后参与了分布式数据库DDB，缓存NKV，网易数据运河NDC等项目，目前是DDB项目负责人，主导数据库中间件的各种项目研发。专注于分布式系统架构与数据库技术，热衷于构建高效的，高性能的分布式后台应用。

**主题简介：**过去十年，是互联网井喷式发展的十年，十年前，为了应对博客近千万的日活，我们研发了分布式数据库DDB，为网易众多互联网应用提供透明分库分表服务；十年后，考拉，云音乐等产品爆发式的体量对我们产品在易用性，可用性和可靠性上提出了更大挑战：第一是要求我们有更加平台化，一站式的管理工具，提供更加灵活和场景化的在线扩容，数据迁移等功能；第二是围绕机房搭建异地多活的体系架构，实现底层数据库在极端情况下的可靠性切换；第三是将数据库中的数据通过简单配置，导向异构数据系统，打通OLTP与OLAP的壁垒，异或将数据库的增量变更订阅到应用端，通过数据驱动业务。未来的一段时间，我们将见证DDB从软件形态逐渐蜕变为围绕应用结构化数据的中心平台，我们拭目以待。

**分享大纲：**

1.  DDB架构演化之路：介绍DDB系统11年来的版本更迭，架构演变
2.  网易数据运河NDC：简单介绍NDC系统的功能和架构
3.  结构化数据中心Galaxy：从应用场景，产品形态和架构方面阐述数据中心Galaxy的理念和概念，Galaxy=DDB+NDC
4.  总结

**听众受益：**通过了解DDB，NDC的功能形态，架构设计，可以开阔听众眼界，帮助拓宽听众在中间件设计哲学的思路，加深听众对分库分表等相关领域的理解，另外本次分享的结构化数据中心理念，相信会使听众耳目一新。

![图片描述][20171211150532211]

莫晓东 微信支付高级DBA

**演讲主题：MySQL高可用运营**

**个人简介：**莫晓东，微信支付高级DBA，目前专注社交支付存储层架构和优化，多年数据层架构设计和运维经验。负责过早期腾讯手机游戏和增值业务数据库平台建设，拥有丰富的MySQL集群建设和高可用运营经验。

**主题简介：**现在是数据层架构的变革期，数据规模的不断增长和数据云的不断发展，MySQL在其中起到了越来越重要的作用。在多年的DBA工作历程中，经历了数据层架构的变革，从单实例到高可用的数据库集群。这里向大家分享我在数据库运营中遇到的一些问题和数据库架构的演变情况。主要分享MySQL数据库集群的高可用实现、腾讯的数据库架构和业界优秀高可用数据架构的情况。

**分享大纲：**

1.  为什么选择MySQL
2.  高可用和一致性
3.  分布式数据库
4.  数据库到存储云

**适合人群：**使用MySQL的技术人员

**听众受益：**

1.  对MySQL数据库的事务处理技术能全面、系统地进行掌握和了解
2.  能深入了解主流数据库与MySQL事务处理方面的异同

![图片描述][20171211150604484]

张冬洪 微博研发中心高级DBA、Redis中国用户组主席

**演讲主题：微博热点事件背后的数据库运维心得**

**个人简介：**张冬洪，微博研发中心高级DBA，Redis中国用户组主席，多年Linux和数据库运维经验，专注于MySQL和NoSQL架构设计与运维以及自动化平台的开发；目前在微博主要负责Feed核心系统相关业务的数据库运维和业务保障工作。

**主题简介：**微博作为当今中文社交媒体的第一品牌，拥有超过3.76亿的月活用户，也是当前社会热点事件传播的最主要平台，其中包括但不限制于大型活动、春晚、明星动态等，而热点事件往往具有不可预见性和突发性，并且伴随着极短时间内流量的数倍增长，甚至更多，有时持续时间较长。在大数据量，高并发场景下如何快速应对突发流量的冲击，确保线上服务的稳定性，一线老兵亲临解读其背后的数据库运维心得。

**听众受益:**

1.  了解微博热点事件这类场景下数据库运维面临的挑战
2.  了解大数据量、高并发场景下的数据库运维常用策略和手段
3.  了解微博数据库运维体系建设

![图片描述][20171211150741108]

周正中 阿里云ApsaraDB高级技术专家

**演讲主题：PostgreSQL流计算案例**

**个人简介：**周正中，一枚PGer，PostgreSQL 中国社区发起人之一。PostgreSQL 中国社区大学发起人之一。公益是一辈子的事，Just do it。

**主题简介：**在物联网、证券、实时监控、经营分析等场景，常见海量feed写入，数据实时计算场景可以用更少的硬件，更高的效率解决实时大屏，实时统计，实时异动响应等需求。本次分享将介绍采用PostgreSQL在这些场景的应用案例。

**适合人群:** DBA、开发、架构师

![图片描述][20171211150821595]

金戈 杭州沃趣科技股份有限公司高级技术专家

**演讲主题：Kubernetes存储技术分享及其在数据库场景下的应用**

**个人简介：**金戈，沃趣科技高级技术专家，负责沃趣科技所有产品线监控系统的研发工作，负责沃趣科技RDS的原型开发工作，精通监控系统架构设计与开发,致力于自动化智能化IT基础设施平台建设，有多年系统运维和监控系统开发经验。

**主题简介：**介绍Kubernetes存储相关原理和技术，并以数据库RDS为视角介绍在真实场景下的应用。

1.  仅以存储视角介绍Kubernetes集群编排系统
2.  并将无状态和有状态应用对比分享有状态应用在实现上的难点
3.  深入Kubernetes源码，了解实现存储子系统的几个重要模块
4.  结合数据库RDS应用分享实践

**分享大纲：**

1.  仅以存储视角介绍Kubernetes集群编排系统，
2.  并将无状态和有状态应用对比分享有状态应用在实现上的难点，
3.  深入Kubernetes源码，了解实现存储子系统的几个重要模块
4.  结合数据库RDS应用分享实践

**适合人群：**程序员、架构师，和运维工程师

**听众受益：**

1.  了解Kubernetes
2.  深入理解Kubernetes的存储技术
3.  了解如何在Kubernetes上编排有状态容器

![图片描述][20171211150629437]

卞昊穹，中国人民大学博士研究生

**演讲主题：数据仓库与HDFS的列存储技术**

**个人简介：**卞昊穹，中国人民大学2012级博士研究生，研究方向为数据库系统和实时数据分析，从事SQL-on-Hadoop系统测试和开发。在HDFS列存储优化、高性能数据索引和装载、分布式等值连接算法、海量知识库扩充等方面的研究成果发表在SIGMOD、CIKM等国际顶级学术会议上。

**主题简介：**传统数据仓库中，存储格式是关系到数据查询性能的最重要因素之一，也是数据分析系统设计和研发的基础。在大数据时代，基于Hadoop的Spark/Hive/Presto等SQL on Hadoop系统借助HDFS优秀的扩展性，也借鉴了传统数据仓库中的现有技术，发展成为大数据查询分析的主流工具。列存储作为这些面向分析的系统中所必须支持的标准数据存储技术，经过多年的发展，已经成为数据分析人员必须深入理解的基本技术。本演讲将和大家分享列存储技术的基本概念、技术要点和最新的现状。

**分享大纲：**

1.  数据存储格式概述  
    1.1 数据仓库与大数据分析系统的发展历程  
    1.2 列存储与行存储  
    1.3 混合存储
2.  数据仓库中的列存储技术  
    2.1 C-Store  
    2.2 Vertica  
    2.3 GreenPlum
3.  HDFS列存储技术  
    3.1 RC File  
    3.2 ORC和Parquet  
    3.3 Carbondata
4.  列存储研究前沿

**适合人群：**熟悉HDFS基本原理，了解SQL on Hadoop的大数据初学者和从业人员

**听众受益：**帮助听众从入门的角度理解列存储技术和其他存储技术之间的关系，列存储技术的优点和使用场景，帮助听众在实际的数据分析中更好地使用列存储技术，帮助听众了解列存储技术的研究和实际应用的前沿。

**扫描下方二维码，入群交流**

![这里写图片描述][20171218132721018]

[SDCC 2017]: http://edu.csdn.net/huiyiCourse/series_detail/74
[20171211130900683]: /images/20220526/e3fe608a1dfa415d845f7a60b7e70dad.png
[20171211150317398]: /images/20220526/e120f0710ada4533a7119cce9ed05afa.png
[20171211150443840]: /images/20220526/2bd9648beab74080a43a37e81307ee34.png
[20171211150532211]: /images/20220526/d8c402563d7a4abda8ed59e3b4de1dab.png
[20171211150604484]: /images/20220526/a306b66aa4dd4348bde7a1799e2b3c3f.png
[20171211150741108]: /images/20220526/fe166f22fa314a628a9e4ff5cf445d49.png
[20171211150821595]: /images/20220526/eff929668a43421bb01c85a0b2b6a85a.png
[20171211150629437]: /images/20220526/3b5bb6933c7c446a8a77402b288d2d31.png
[20171218132721018]: /images/20220526/f742f4ea521143b8a328b6ddda3af071.png