如何让JOIN跑得更快？

@H_616_1@

JOIN 一直是数据库性能优化的老大难问题࿰c;本来挺快的查询࿰c;一旦涉及了几个 JOIN࿰c;性能就会陡降。而且࿰c;参与 JOIN 的表越大越多࿰c;性能就越难提上来。

其实࿰c;让 JOIN 跑得快的关键是要对 JOIN 分类࿰c;分类之后࿰c;就能利用各种类型 JOIN 的特征来做性能优化了。

JOIN 分类

有 SQL 开发经验的同学都知道࿰c;绝大多数 JOIN 都是等值 JOIN࿰c;也就是关联条件为等式的 JOIN。非等值 JOIN 要少见得多࿰c;而且多数情况也可以转换成等值 JOIN 来处理࿰c;所以我们可以只讨论等值 JOIN。

等值 JOIN 主要又可以分为两大类：外键关联和主键关联。

外键关联是指用一个表的非主键字段࿰c;去关联另一个表的主键࿰c;前者称为事实表࿰c;后者为维表。比如下图中࿰c;订单表是事实表࿰c;客户表、产品表、雇员表是维表。

外键表是多对一关系࿰c;而且是不对称的࿰c;事实表和维表的位置不能互换。需要说明的是࿰c;这里说的主键是指逻辑上的主键࿰c;也就是在表中取值唯一、可以用于唯一确定某条记录的字段（或字段组）࿰c;不一定在数据库表上建立过主键。

主键关联是指用一个表的主键关联另一个表的主键或部分主键。比如下图中客户和 VIP 客户、订单表和订单明细表的关联。

客户和 VIP 客户按照主键关联࿰c;这两个表互为同维表。订单则是用主键去关联明细的部分主键࿰c;我们称订单表是主表࿰c;明细表是子表。

同维表是一对一关系。且同维表之间是对称的࿰c;两个表的地位相同。主子表则是一对多关系࿰c;而且是不对称的࿰c;有明确的方向。

仔细观察会发现࿰c;这两类 JOIN 都涉及到主键了。而不涉及主键的 JOIN 会导致多对多关系࿰c;大多数情况都没有业务意义。换句话说࿰c;上述这两大类 JOIN 涵盖了几乎全部有业务意义的 JOIN。如果我们能利用 JOIN 总会涉及主键这个特征做性能优化࿰c;能解决掉这两大类 JOIN࿰c;其实也就意味着解决了大部分 JOIN 性能问题。

但是࿰c;SQL 对 JOIN 的定义并不涉及主键࿰c;只是两个表做笛卡尔积后再按某种条件过滤。这个定义很简单也很宽泛࿰c;几乎可以描述一切。但是࿰c;如果严格按这个定义去实现 JOIN࿰c;也就没办法在性能优化时利用主键的特征了。

SPL 改变了 JOIN 的定义࿰c;专门针对这两大类 JOIN 分别处理࿰c;利用了主键的特征减少运算量࿰c;从而实现性能优化的目标。

下面我们来看看 SPL 具体是怎么做的。

外键关联

如果事实表和维表都不太大࿰c;可以全部装入内存࿰c;SPL 提供了外键地址化方法：先把事实表中的外键字段值转换为对应维表记录的地址࿰c;之后引用维表字段时࿰c;就可以用地址直接取出了。

以前面的订单表、雇员表为例࿰c;假定这两个表已经被读入内存。外键地址化的工作机制是这样的：对于订单表某记录 r 的 EID 字段࿰c;到雇员表中找到这个 EID 字段值对应的记录࿰c;得到其内存地址 a࿰c;再将 r 的 EID 字段值替换成 a。对订单表的所有记录都做好这样的转换࿰c;就完成了外键地址化。这时候࿰c;订单表记录 r 要引用雇员表字段时࿰c;直接用 EID 字段存储的地址 a 取出雇员表记录和字段就可以了࿰c;相当于常数时间内就能取得雇员表的字段࿰c;不需要再到雇员表做查找。

可以在系统启动时把事实表和维表读入内存࿰c;并一次性做好外键地址化࿰c;即预关联。这样࿰c;在后续关联计算时就能直接用事实表外键字段中的地址去取维表记录࿰c;完成高性能的 JOIN 计算。

外键地址化和预关联的详细原理请参考：【性能优化】6.1 [外键关联] 外键地址化

SQL 通常使用 HASH 算法来做内存连接࿰c;需要计算 HASH 值和比对࿰c;性能会比直接用地址读取差很多。

SPL 之所以能实现外键地址化࿰c;是利用了维表的关联字段是主键这一特征。上面例子中࿰c;关联字段 EID 是雇员表的主键࿰c;具有唯一性。订单表中的每个 EID 只会唯一对应一条雇员记录࿰c;所以才能把每个 EID 转换成它唯一对应的那条雇员记录的地址。

而 SQL 对 JOIN 的定义中没有主键的约定࿰c;就不能认定与事实表中外键关联的维表记录有唯一性࿰c;有可能发生与多条记录关联的情况。对于订单表的记录来讲࿰c;EID 值没有办法唯一对应一条雇员记录࿰c;就无法做到外键地址化了。而且 SQL 也没有记录地址这种数据类型࿰c;结果会导致每次关联时还是要计算 HASH 值并比对。

只是两个表 JOIN 时࿰c;外键地址化和 HASH 关联的差别还不是非常明显。这是因为 JOIN 并不是最终目的࿰c;JOIN 之后还会有其它很多运算࿰c;JOIN 本身运算消耗时间的占比相对不大。但事实表常常会有多个维表࿰c;甚至维表还会有很多层。比如订单关联产品࿰c;产品关联供应商࿰c;供应商关联城市࿰c;城市关联国家等等。在关联表很多时࿰c;外键地址化的性能优势会更明显。

下面的测试࿰c;在关联表个数不同的情况下对比 SPL 与 Oracle 的性能差异࿰c;可以看出在表很多时࿰c;外键地址化的优势相当明显：

测试的详细情况请参考：性能优化技巧：预关联。

对于只有维表能装入内存࿰c;而事实表很大需要外存的情况࿰c;SPL 提供了外键序号化方法：预先将事实表中的外键字段值转换为维表对应记录的序号。关联计算时࿰c;分批读入新事实表记录࿰c;再用序号取出对应维表记录。

以上述订单表、产品表为例࿰c;假定产品表已经装入内存࿰c;订单表存储在外存中。外键序号化的过程是这样：先读入一批订单数据࿰c;设其中某记录 r 中的 pid 对应的是内存中产品表的第 i 条记录。我们要将 r 中的 pid 字段值转换为 i。对这批订单记录都完成这样的转换后࿰c;再做关联计算时࿰c;从外存中分批读入订单数据。对于其中的记录 r࿰c;就可以直接根据 pid 值࿰c;去内存中的产品表里用位置取出相应的记录࿰c;也避免了查找动作。

外键序号化原理更详细的介绍参考：【性能优化】6.3 [外键关联] 外键序号化。

数据库通常会把小表读入内存࿰c;再分批读入大表数据࿰c;用哈希算法做内存连接࿰c;需要计算哈希值和比对。而 SPL 使用序号定位是直接读取࿰c;不需要进行任何比对࿰c;性能优势比较明显。虽然预先把事实表的外键字段转换成序号需要一定成本࿰c;但这个预计算只需要做一次࿰c;而且可以在多次外键关联中得到复用。

SPL 外键序号化同样利用了维表关联字段是主键的特征。如前所述࿰c;SQL 对 JOIN 的定义没有主键的约定࿰c;无法利用这一特征做到外键序号化。另外࿰c;SQL 使用无序集合的概念࿰c;即使我们事先把外键序号化了࿰c;数据库也无法利用这个特点࿰c;不能在无序集合上使用序号快速定位的机制࿰c;最快也就是用索引查找。而且࿰c;数据库并不知道外键被序号化了࿰c;仍然会去计算 HASH 值和比对。

下面这个测试࿰c;在不同并行数情况下࿰c;对比 SPL 和 Oracle 完成大事实表、小维表关联计算的速度࿰c;SPL 跑的比 Oracle 快 3 到 8 倍。测试结果见下图：

这个测试更详细的信息请参考：性能优化技巧：外键序号化。

如果维表很大也需要外存࿰c;而事实表较小能装入内存࿰c;SPL 则提供了大维表查找机制。如果维表和事实表都很大࿰c;SPL 则使用单边分堆算法。对于维表过滤后再关联的情况࿰c;SPL 提供了索引复用方法及对位序列等方法。

数据量大到需要分布式计算时࿰c;如果维表较小࿰c;SPL 采用复写维表机制࿰c;将维表在集群节点上复制多份；如果维表很大࿰c;则采用集群维表方法以保证随机访问。这两种方法都可以有效的避免 Shuffle 动作。相比而言࿰c;SQL 体系下不能区分出维表࿰c;HASH 拆分方法要将两个表都做 Shuffle 动作࿰c;@R_278_8741@要大得多。

主键关联

主键关联涉及的表一般都比较大࿰c;需要存储在外存中。SPL 为此提供了有序归并方法：预先将外存表按照主键有序存储࿰c;关联时顺序取出数据做归并计算。

以客户和 VIP 客户两个表做内连接为例࿰c;假设已经预先将两个表按照主键 cid 有序存储在外存中。关联时࿰c;从两个表的游标中读取记录࿰c;逐条比较 cid 值。如果 cid 相等࿰c;则将两表的记录合并成结果游标的一条记录返回。如果不相等࿰c;则 cid 小的那个游标再读取记录࿰c;继续判断。重复这些动作直到任何一个表的数据被取完࿰c;返回的游标就是 JOIN 的结果。

对于两个大表关联࿰c;数据库通常使用哈希分堆算法࿰c;复杂度是乘法级的。而有序归并算法复杂度是加法级࿰c;性能会好很多。而且࿰c;数据库做大数据的外存运算时࿰c;哈希分堆会产生缓存文件的读写动作。有序归并算法则只需要对两个表依次遍历࿰c;不必借助外存缓存࿰c;可以大幅降低 IO 量࿰c;有巨大的性能优势。

预先按照主键排序的成本虽高࿰c;但是一次性做好即可࿰c;以后就总能使用归并算法实现 JOIN࿰c;性能可以提高很多。同时࿰c;SPL 也提供了在有追加数据时仍然保持数据整体有序的方案。

这类 JOIN 的特征在于关联字段是主键或部分主键࿰c;有序归并算法正是根据这个特征来设计的。因为不管是同维表还是主子表࿰c;关联字段都不会是主键之外的其他字段࿰c;所以我们将关联表按照主键有序这一种方式排序存储就可以了࿰c;不会出现冗余。而外键关联就不具备这个特征࿰c;不能使用有序归并。具体来说࿰c;是因为事实表的关联字段不是主键࿰c;会存在多个要参与关联的外键字段࿰c;我们不可能让同一个事实表同时按多个字段都有序。

SQL 对 JOIN 的定义不区分 JOIN 类型࿰c;不假定某些 JOIN 总是针对主键的࿰c;就没办法从算法层面上利用主键关联的特征。而且࿰c;前面说过 SQL 基于无序集合概念࿰c;数据库不会刻意保证数据的物理有序性࿰c;很难实施有序归并算法。

有序归并算法的优势还在于易于分段并行。以订单和订单明细按 oid 关联为例࿰c;假如将两表都按照记录数大致平均分为 4 段࿰c;订单第 2 段的 oid 有可能会出现在明细第 3 段࿰c;类似的错位会导致错误的计算结果。SPL 再次利用主键 oid 的有序性࿰c;提供同步分段机制࿰c;解决了这个问题：先将有序的订单表分为 4 段࿰c;再找到每一段起止记录的 oid 值形成 4 个区间࿰c;将明细表也分成同步的 4 段。这样࿰c;在并行计算时两表对应分段就不会出现错位了。由于明细表也对 oid 有序࿰c;可以迅速地按照起止 oid 定位࿰c;不会降低有序归并的性能。

有序归并和同步分段并行的原理࿰c;详见：SPL 有序归并关联。

传统的 HASH 分堆技术实现并行就比较困难了࿰c;多线程做 HASH 分堆时需要同时向某个分堆写出数据࿰c;造成共享资源冲突；而下一步实现某组分堆关联时又会消费大量内存࿰c;无法实施较大的并行数量。

实际测试证明࿰c;在相同情况下࿰c;我们对两个大表做主键关联测试（详情参见性能优化技巧：有序归并）࿰c;结果是 SPL 比 Oracle 快了近 3 倍：

除了有序归并࿰c;SPL 还提供了很多高性能算法࿰c;全面提高主键关联 JOIN 的计算速度。包括：附表机制࿰c;可以将多表一体化存储࿰c;减少存储数据量的同时࿰c;还相当于预先完成了关联࿰c;不需要再比对了；关联定位算法࿰c;实现先过滤再关联࿰c;可以避免全表遍历࿰c;获得更好的性能等等。

当数据量继续增加࿰c;需要多台服务器集群时࿰c;SPL 提供复组表机制࿰c;将需要关联的大表按照主键分布到集群节点上。相同主键的数据在同一节点࿰c;避免分机之间的数据传输࿰c;也不会出现 Shuffle 动作。

回顾与总结

回顾上面两大类、各场景 JOIN࿰c;采用 SPL 分情况提供的高性能算法࿰c;可以利用不同类型 JOIN 的特征提速࿰c;让 JOIN 跑得更快。SQL 对上述这么多种 JOIN 场景笼统的处理࿰c;就没办法针对不同 JOIN 的特征来实施这些高性能算法。比如：事实表和维表都装入内存时࿰c;SQL 只能按照键值计算 HASH 和比对࿰c;无法利用地址直接对应；SQL 数据表无序࿰c;在大表按照主键关联时无法做到有序归并࿰c;只能使用 HASH 分堆࿰c;有可能会出现多次缓存的现象࿰c;性能有一定的不可控性。

并行计算方面࿰c;SQL 单表计算时还容易做到分段并行࿰c;多表关联运算时一般就只能事先做好固定分段࿰c;很难做到同步动态分段࿰c;这就难以根据机器的负载临时决定并行数量。

对于集群运算也是这样࿰c;SQL 在理论上不区分维表和事实表࿰c;要实现大表 JOIN 就会不可避免地产生占用大量网络资源的 HASH Shuffle 动作࿰c;在集群节点数太多时࿰c;网络传输造成的延迟会超过节点多带来的好处。

SPL 设计并应用了新的运算和存储模型࿰c;可以在原理和实现上解决 SQL 的这些问题。对于 JOIN 的不同分类和场景࿰c;程序员有针对性的采取上述高性能算法࿰c;就能获得更快的计算速度࿰c;让 JOIN 跑得更快。

SPL资料

• SPL官网
• SPL下载
• SPL源代码

欢迎对SPL有兴趣的加小助手（VX号：SPL-Helper）࿰c;进SPL技术交流群