算法工程师的修养 | 图解SQL

布满荆棘的人生 2022-09-09 06:11 151阅读 0赞

点击上方“**机器学习与生成对抗网络**”，关注星标

获取有趣、好玩的前沿干货！

作者：不剪发的Tony老师

https://blog.csdn.net/horses/article/details/104553075

**本文介绍关系数据库的设计思想：**在 SQL 中，一切皆关系。

**在计算机龄域有许多伟大的设计理念和思想，例如：**

*  在** Unix **中，一切皆**文件**。
 *  在**面向对象的编程语言**中，一切皆**对象**。

关系数据库同样也有自己的设计思想：**在**** SQL 中，一切皆关系。**

**01**

**关系模型**

**关系模型**（Relational model）由 E.F.Codd 博士于 1970 年提出，以集合论中的**关系概念**为基础；无论是现实世界中的实体对象还是它们之间的联系都**使用关系表示**。我们在数据库系统中看到的关系就是**二维表**（Table），由**行**（Row）和**列**（Column）组成。因此，也可以说**关系表**是由**数据行**构成的集合。

![5b93ed65ab454b58c2bfed440613ea4b.png][]

关系模型由**数据结构**、**关系操作**、**完整性约束**三部分组成。

*  **关系模型**中的数据结构就是**关系表**，包括**基础表**、**派生表**（查询结果）和**虚拟表**（视图）。
 *  常用的**关系操作**包括**增加**、**删****除**、**修改**和**查询**（CRUD），使用的就是 SQL 语言。其中查询操作最为复杂，包括选择（Selection）、投影（Projection）、并集（Union）、交集（Interp）、差集（Exception）以及笛卡儿积（Cartesian product）等。
 *  **完整性约束**用于维护数据的完整性或者满足业务约束的需求，包括**实体完整性**（主键约束）、**参照完整性**（外键约束）以及**用户定义的完整性**（非空约束、唯一约束、检查约束和默认值）。

我们今天的主题是关系操作语言，也就是 SQL。

**02**

**面向集合**

**SQL**（结构化查询语言）是**操作关系数据库的标准语言**。SQL 非常接近英语，使用起来非常简单。它在设计之初就考虑了非技术人员的使用需求，我们通常只需说明**想要的结果**（What），而将数据处理的过程（How）交给数据库管理系统。所以说，SQL 才是真正给人用的编程语言！

接下来我们具体分析一下关系的各种操作语句；目的是为了让大家能够了解 SQL 是一种面向集合的编程语言，它的**操****作对象是集合，操作的结果也是集合**。

> 在关系数据库中，关系、表、集合三者通常表示相同的概念。

**03**

**SELECT**

**下面是一个简单的查询语句：**

SELECT employee_id, first_name, last_name, hire_date
      FROM employees;

它的作用就是从 employees 表中**查询**员工信息。

显然，我们都知道 FROM 之后是一个表（关系、集合）。不仅如此，整个**查询语句的结果也是一个表**。

**所以，我们可以将上面的查询作为表使用：**

SELECT *
      FROM (SELECT employee_id, first_name, last_name, hire_date
              FROM employees) t;

括号内的查询语句被称为**派生表**，我们给它指定了一个别名叫做 t。同样，整个**查询结果也是一个表**；这就意味着我们可以继续嵌套，虽然这么做很无聊。

**我们再看一个 PostgreSQL 中的示例：**

-- PostgreSQL
    SELECT *
      FROM upper('sql');
    | upper |
    |-------|
    | SQL |

**upper()** 是一个**大写转换的函数**。它出现再 FROM 子句中，意味着它的结果也是一个表，只不过是 **1 行 1 列的特殊表**。

**SELECT** 子句用于**指定**需要查询的字段，可以包含**表达式、函数值**等。SELECT 在关系操作中被称为**投影**（Projection），看下面的示意图应该就比较好理解了。

![c09b224a64786c26b02a607f6fc28096.png][]

除了 SELECT 之外，还有一些常用的** SQL** 子句。

**WHERE** 用于指定数据过滤的条件，在关系运算中被称为**选择**（Selection），**示意图如下：**

![7efcb5be598d14ae58361bd3304c884a.png][]

**ORDER BY** 用于对查询的**结果进行排序**，**示意图如下：**

![351d7db06d5a82a9984a4c541a37d060.png][]

总之，**SQL** 可以完成各种数据操作，例如**过滤、分组、排序、限定数量**等；所有这些操作的对象都是**关系表**，结果也是**关系表**。

![3c6f9527abf7e8c4a33c71e92f5a7f5a.png][]

在这些关系操作中，有一个比较特殊，就是分组。

**04**

**GROUP BY**

**分组**（ GROUP BY）操作和其他的关系操作不同，因为它改变了关系的结构。**来看下面的示例：**

SELECT department_id, count(*), first_name
      FROM employees
     GROUP BY department_id;

该语句的目的是按照部门**统计**员工的**数量**，但是存在一个语法错误，就是 first\_name 不能出现在查询列表中。原因在于按照部门进行分组的话，每个部门包含多个员工；无法确定需要显示哪个员工的姓名，这是一个逻辑上的错误。

所以说，**GROUP BY ****改变了集合元素（数据行）的结构**，创建了一个全新的关系。

**分组操作的示意图如下：**

![983764cf9c73f422d5f87a7d28c56def.png][]

尽管如此，GROUP BY 的结果仍然是一个集合。

**05**

**UNION**

**SQL 面向集合特性最明显的体现就是：**

*  **UNION**（并集运算）
 *  **INTERSECT**（交集运算）
 *  **EXCEPT/MINUS**（差集运算）

这些集合运算符的作用都是**将两个集合并成一个集合，****因此需要满足以下条件：**

*  两边的集合中字段的数量和顺序必须相同；
 *  两边的集合中对应字段的类型必须匹配或兼容。

具体来说，UNION 和 UNION ALL 用于计算两个集合的并集，返回出现在第一个查询结果或者第二个查询结果中的数据。

它们的**区别**在于 **UNION****排除**了结果中的重复数据，**UNION ALL****保留**了重复数据。

**下面是 UNION 操作的示意图：**

![952e05bd971de369c3afd624161933b1.png][]

**INTERSECT **操作符用于**返回**两个集合中的**共同部分**，即同时出现在第一个查询结果和第二个查询结果中的数据，并且**排除**了结果中的**重复数据**。

**INTERSECT 运算的示意图如下：**

![7688f95fafbeec13eb7fc3540a6b8400.png][]

**EXCEPT** 或者 **MINUS** 操作符用于返回两个集合的**差集**，即出现在第一个查询结果中，但不在第二个查询结果中的记录，并且**排除了结果中的重复数据**。

**EXCEPT 运算符的示意图如下：**

![4e49eb02fe3c7ad48098116ee95bbe95.png][]

除此之外，**DISTINCT** 运算符用于**消除重复数据**，也就是排除集合中的重复元素。

> SQL 中的关系概念来自数学中的集合理论，因此 UNION、INTERSECT 和 EXCEPT 分别来自集合论中的并集（∪\\cup∪）、交集（∩\\cap∩）和差集（∖\\setminus∖）运算。
> 
> 需要注意的是，集合理论中的集合不允许存在重复的数据，但是 SQL 允许。因此，SQL 中的集合也被称为多重集合（multiset）；多重集合与集合理论中的集合都是无序的，但是 SQL 可以通过 ORDER BY 子句对查询结果进行排序。

**06**

**JOIN**

在 SQL 中，不仅实体对象存储在关系表中，**对象之间的联系**也存储在关系表中。因此，当我们想要获取这些相关的数据时，需要使用到另一个操作：**连接查询（JOIN）**。

常见的 SQL连接查类型包括**内连接**、**外连接**、**交叉连接**等。其中，外连接又可以分为左外连接、右外连接以及全外连接。

**内连接**（Inner Join）返回两个表中**满足连接条件**的数据，**内连接的原理如下图所示：**

![f79ab9a369855eb104521e26c16762de.png][]

**左外连接**（Left Outer Join）返回**左表中所有**的数据；对于**右表，返回满足连接条件**的数据；如果没有就返回空值。

**左外连接的原理如下图所示：**

![38a852cb7ad46c74c6266dd52489802b.png][]

**右外连接**（Right Outer Join）返回**右表中所有**的数据；对于**左表，返回满足连接条件**的数据，如果没有就返回空值。右外连接与左外连接**可以互换**，**以下两者等价：**

t1 RIGHT JOIN t2
    t2 LEFT JOIN t1

**全外连接**（Full Outer Join）等价于**左外连接加上右外连接**，同时返回左表和右表中所有的数据；对于两个表中不满足连接条件的数据返回空值。

**全外连接的原理如下图所示：**

![cef374b3fe8a810ca775fe03f9edcbb7.png][]

**交叉连接**也称为笛卡尔积（Cartesian Product）。两个表的交叉连接相当于一个表的所有行和另一个表的所有行两两组合，结果的数量为**两个表的行数相乘**。

**交叉连接的原理如下图所示：**

![73f13fcc7cca1548b933384ce90e88db.png][]

> 其他类型的连接还有半连接（SEMI JOIN）、反连接（ANTI JOIN）。

**集合操作**将两个集合合并成一个更大或更小的集合；**连接查询**将两个集合转换成一个更大或更小的集合，同时获得了一个更大的元素（更多的列）。很多时候**集合操作都可以通过连接查询来实现****，例如：**

SELECT department_id
      FROM departments
     UNION
    SELECT department_id
      FROM employees;

**等价于：**

SELECT COALESCE(d.department_id, e.department_id)
      FROM departments d
      FULL JOIN employees e ON (e.department_id = d.department_id);

我们已经介绍了许多查询的示例，接下来看看其他的数据操作。

**07**

**DML**

**DML** 表示数据操作语言，也就是**插入、更新和删除**。以下是一个插入语句示例：

CREATE TABLE test(id int);
    
    -- MySQL、SQL Server 等
    INSERT INTO test(id) VALUES (1),(2),(3);
    
    -- Oracle
    INSERT INTO test(id)
    (SELECT 1 AS id FROM DUAL
    UNION ALL
    SELECT 2 FROM DUAL
    UNION ALL
    SELECT 3 FROM DUAL);

我们通过一个 INSERT 语句插入了 3 条记录，或者说是插入了一个包含 3 条记录的关系表。因为，UNION ALL **返回**的是一个关系表。VALUES 同样是**指定**了一个关系表，在 SQL Server 和 PostgreSQL 中支持以下语句：

SELECT *
    FROM (
      VALUES(1),(2),(3)
    ) test(id);

前面我们已经说过，**FROM** 之后是一个**关系表**，所以这里的 **VALUES** 也是一样。由于我们经常插入单条记录，并没有意识到实际上是**以表为单位**进行操作。

同样，**UPDATE 和 DELETE** 语句也都是**以关系表为单位**的操作；只不过我们习惯了说更新一行数据或者删除几条记录。

**猜您喜欢：**

**[等你着陆！【GAN生成对抗网络】知识星球！][GAN]  **

**[CVPR 2021 | GAN的说话人驱动、3D人脸论文汇总][CVPR 2021 _ GAN_3D]**

**[CVPR 2021 | 图像转换 今如何？几篇GAN论文][CVPR 2021 _ _ _GAN]**

[**【CVPR 2021】通过GAN提升人脸识别的遗留难题**][CVPR 2021_GAN]

[**CVPR 2021生成对抗网络GAN部分论文汇总**][CVPR 2021_GAN 1]

[**经典GAN不得不读：StyleGAN**][GAN_StyleGAN]

[**最新最全20篇！基于 StyleGAN 改进或应用相关论文**][20_ StyleGAN]

**[超100篇！CVPR 2020最全GAN论文梳理汇总！][100_CVPR 2020_GAN]**

[**附下载 | 《Python进阶》中文版**][_ _Python]

[**附下载 | 经典《Think Python》中文版**][_ _Think Python]

[**附下载 | 《Pytorch模型训练实用教程》**][_ _Pytorch]

[**附下载 | 最新2020李沐《动手学深度学习》**][_ _2020]

**[附下载 | 《可解释的机器学习》中文版][Link 1]**

[**附下载 |《TensorFlow 2.0 深度学习算法实战》**][_TensorFlow 2.0]

**[附下载 | 超100篇！CVPR 2020最全GAN论文梳理汇总！][100_CVPR 2020_GAN]**

**[附下载 |《计算机视觉中的数学方法》分享][Link 2]**

![4b8a9e973817a13fa7759483f3aed222.png][]

[5b93ed65ab454b58c2bfed440613ea4b.png]: /images/20220829/18159f70aacc4a559b954dd469026b5e.png
[c09b224a64786c26b02a607f6fc28096.png]: /images/20220829/ba42cc76503045af8058f4e544317f0e.png
[7efcb5be598d14ae58361bd3304c884a.png]: /images/20220829/4acc390cdcdd4158ad0eac25a482c0ec.png
[351d7db06d5a82a9984a4c541a37d060.png]: /images/20220829/ada476e48d7b44fb8a65a4e760c5f27c.png
[3c6f9527abf7e8c4a33c71e92f5a7f5a.png]: /images/20220829/2f577e92f7bb48849c90a6064955d43c.png
[983764cf9c73f422d5f87a7d28c56def.png]: /images/20220829/5ecb300aa07244a79ca6f0ff41c824dd.png
[952e05bd971de369c3afd624161933b1.png]: /images/20220829/4b22a6cd110f4a9883ad9a91b0375367.png
[7688f95fafbeec13eb7fc3540a6b8400.png]: /images/20220829/afeed4b0004341d7aa9afabc5de658cd.png
[4e49eb02fe3c7ad48098116ee95bbe95.png]: /images/20220829/eae7790224a04caaa6cd897753abcc83.png
[f79ab9a369855eb104521e26c16762de.png]: /images/20220829/9507652bd1fb45a3bea0ac7fe2fef36a.png
[38a852cb7ad46c74c6266dd52489802b.png]: /images/20220829/84b658b4182f4c2695c0561922bc7893.png
[cef374b3fe8a810ca775fe03f9edcbb7.png]: /images/20220829/9d937f712f4e4c88af503eb1d52a69cc.png
[73f13fcc7cca1548b933384ce90e88db.png]: /images/20220829/b79f72e0012c467bacfff0f05d97fe70.png
[GAN]: http://mp.weixin.qq.com/s?__biz=MzU5MTgzNzE0MA%3D%3D&chksm=fe29bf4bc95e365d4f53676d3aa2b80299375e55f9bab3bc7f8ad9405e7ada61d7ac00abb4bf&idx=1&mid=2247491056&scene=21&sn=535829ad04b094f59b2b38eb85cdbb38#wechat_redirect
[CVPR 2021 _ GAN_3D]: http://mp.weixin.qq.com/s?__biz=MzU5MTgzNzE0MA%3D%3D&chksm=fe2a41fac95dc8ec752351699318742fa502dfc945ce072567bb4bf0c59ce83049dc58c1a57d&idx=1&mid=2247492417&scene=21&sn=292be5e5fab52c5df5c94508b898da5a#wechat_redirect
[CVPR 2021 _ _ _GAN]: http://mp.weixin.qq.com/s?__biz=MzU5MTgzNzE0MA%3D%3D&chksm=fe2a4278c95dcb6ebd0ba346a11dc195a0ac4f7830f3a7cf69fcffc7057fa1bf3eaeb9386300&idx=1&mid=2247491779&scene=21&sn=f0a601ca66c01361709e6af8485f629b#wechat_redirect
[CVPR 2021_GAN]: http://mp.weixin.qq.com/s?__biz=MzU5MTgzNzE0MA%3D%3D&chksm=fe2a4289c95dcb9f047c18e63b3be9d78e5e75f1d94dc80be34686ce6b4f22cdee2d7cc7f2ae&idx=1&mid=2247491634&scene=21&sn=427cb6bfd6868662f2b5ae1ac37f6072#wechat_redirect
[CVPR 2021_GAN 1]: http://mp.weixin.qq.com/s?__biz=MzU5MTgzNzE0MA%3D%3D&chksm=fe29bfe4c95e36f275332b31b993532b98d52acc76d26c15e2321de4cf52141510bee3ff96af&idx=1&mid=2247490911&scene=21&sn=671926492c3b36e3350db4963f7fcb16#wechat_redirect
[GAN_StyleGAN]: http://mp.weixin.qq.com/s?__biz=MzU5MTgzNzE0MA%3D%3D&chksm=fe29bedbc95e37cd709f583372918478ad8d3cff5309a85f3a940e7c0356050278f89d7e1c79&idx=2&mid=2247490656&scene=21&sn=bbe156fef077f23263b57e506ad43314#wechat_redirect
[20_ StyleGAN]: http://mp.weixin.qq.com/s?__biz=MzU5MTgzNzE0MA%3D%3D&chksm=fe29b979c95e306f03b134809b16009d06aa0694b03da3368f84625de3700e6a56221d49d1bf&idx=1&mid=2247490498&scene=21&sn=324cfbbde362a728aa5336f4b200f7a3#wechat_redirect
[100_CVPR 2020_GAN]: http://mp.weixin.qq.com/s?__biz=MzU5MTgzNzE0MA%3D%3D&chksm=fe29a94cc95e205ae880cb9518cb16a54c0abde69e5a8654f7fedf70a0cc990775265bf28a1c&idx=1&mid=2247486455&scene=21&sn=94156f53845cdf07e859e343862be745#wechat_redirect
[_ _Python]: http://mp.weixin.qq.com/s?__biz=MzU5MTgzNzE0MA%3D%3D&chksm=fe29abb6c95e22a04d1eb019f964c8ae97b2f3af98c22f730f5d5ed2aea9fdb320b00c688967&idx=2&mid=2247485709&scene=21&sn=55a51c98ab48f393ba305c082ba0e4fe#wechat_redirect
[_ _Think Python]: http://mp.weixin.qq.com/s?__biz=MzU5MTgzNzE0MA%3D%3D&chksm=fe29a418c95e2d0e9a3de46e0e4d1b8d4947154d8639418a511a3091300aa31699932046556e&idx=2&mid=2247485091&scene=21&sn=f569d5d70c2e6c9cc567fbc5147787a4#wechat_redirect
[_ _Pytorch]: http://mp.weixin.qq.com/s?__biz=MzU5MTgzNzE0MA%3D%3D&chksm=fe29aa78c95e236e380c9fd2ae79917d7451ccdd4803c5e6047a16f921d1b61d18efc79ada7c&idx=2&mid=2247485635&scene=21&sn=90608bce32fe353cf3c64b39e3406bc3#wechat_redirect
[_ _2020]: http://mp.weixin.qq.com/s?__biz=MzU5MTgzNzE0MA%3D%3D&chksm=fe29a4a4c95e2db2aab16bdcefa78795bbb7efbc70b533bb197d73f617558f2f8a523120c6e3&idx=2&mid=2247484959&scene=21&sn=563999cc8d48498beed00270844ceec4#wechat_redirect
[Link 1]: http://mp.weixin.qq.com/s?__biz=MzU5MTgzNzE0MA%3D%3D&chksm=fe29a4bac95e2dac758c4aac10a3aac49eb062bc0829d4ef2ebc8e6d5069d246385c5084a2b4&idx=1&mid=2247484929&scene=21&sn=523220858287ed3e6105919703c8e833#wechat_redirect
[_TensorFlow 2.0]: http://mp.weixin.qq.com/s?__biz=MzU5MTgzNzE0MA%3D%3D&chksm=fe29a5b0c95e2ca6599d4a91d5d40900566b7525de3dd85259e7a6c173aa26aa7ea3641d1aaf&idx=2&mid=2247485195&scene=21&sn=e3387067db29d1759755c6c2ea96c870#wechat_redirect
[Link 2]: http://mp.weixin.qq.com/s?__biz=MzU5MTgzNzE0MA%3D%3D&chksm=fe29aa8fc95e23993e057fb0dbe09f2810ea07184a439c173f404a7ab657cadcde3d24efa52a&idx=2&mid=2247485492&scene=21&sn=c4fb135de02cd52f06bc61b0e79476e4#wechat_redirect
[4b8a9e973817a13fa7759483f3aed222.png]: /images/20220829/abc21429cdae44489b7bc62e80408e83.png