数据库两大必备神器:索引和锁底层原理是什么!数据库

来源:互联网 / 作者:SKY / 2018-10-15 20:05 / 点击:
本文主要介绍了数据库中的两个比较重要的知识点:索引和锁。他俩可以说息息相关的,锁会涉及到很多关于索引的知识。

【51CTO技术沙龙】10月27日,让我们共同探索AI场景化应用实现之道

 一、索引

在之前,我对索引有以下的认知:

 索引可以加快数据库的检索速度;

 表经常进行INSERT/UPDATE/DELETE操作就不要建立索引了,换言之:索引会降低插入、删除、修改等维护任务的速度;

 索引需要占物理和数据空间;

 了解过索引的最左匹配原则;

 知道索引的分类:聚集索引和非聚集索引;

 Mysql支持Hash索引和B+树索引两种;

看起来好像啥都知道,但面试让你说的时候可能就GG了:

 使用索引为什么可以加快数据库的检索速度啊?

 为什么说索引会降低插入、删除、修改等维护任务的速度;

 索引的最左匹配原则指的是什么?

 Hash索引和B+树索引有什么区别?主流的使用哪一个比较多?InnoDB存储都支持吗?

 聚集索引和非聚集索引有什么区别?

 .......

1、聊聊索引的基础知识

首先Mysql的基本存储结构是页(记录都存在页里边):

数据库两大必备神器:索引和锁底层原理是什么!

数据库两大必备神器:索引和锁底层原理是什么!

 各个数据页可以组成一个双向链表;

 而每个数据页中的记录又可以组成一个单向链表;

 每个数据页都会为存储在它里边儿的记录生成一个页目录,在通过主键查找某条记录的时候可以在页目录中使用二分法快速定位到对应的槽,然后再遍历该槽对应分组中的记录即可快速找到指定的记录;

 以其他列(非主键)作为搜索条件:只能从最小记录开始依次遍历单链表中的每条记录。

所以说,如果我们写select * from user where username = 'Java3y'这样没有进行任何优化的sql语句,默认会这样做:

 定位到记录所在的页

 需要遍历双向链表,找到所在的页

 从所在的页内中查找相应的记录

 由于不是根据主键查询,只能遍历所在页的单链表了

很明显,在数据量很大的情况下这样查找会很慢!

2、索引提高检索速度

索引做了些什么可以让我们查询加快速度呢?

其实就是将无序的数据变成有序(相对):

数据库两大必备神器:索引和锁底层原理是什么!

要找到id为8的记录简要步骤:

数据库两大必备神器:索引和锁底层原理是什么!

很明显的是:没有用索引我们是需要遍历双向链表来定位对应的页,现在通过"目录"就可以很快地定位到对应的页上了!

其实底层结构就是B+树,B+树作为树的一种实现,能够让我们很快地查找出对应的记录。

3、索引降低增删改的速度

数据库两大必备神器:索引和锁底层原理是什么!

如果一棵普通的树在极端的情况下,是能退化成链表的(树的优点就不复存在了)

数据库两大必备神器:索引和锁底层原理是什么!

B+树是平衡树的一种,是不会退化成链表的,树的高度都是相对比较低的(基本符合矮矮胖胖(均衡)的结构)【这样一来我们检索的时间复杂度就是O(logn)】!从上一节的图我们也可以看见,建立索引实际上就是建立一颗B+树。

 B+树是一颗平衡树,如果我们对这颗树增删改的话,那肯定会破坏它的原有结构;

 要维持平衡树,就必须做额外的工作。正因为这些额外的工作开销,导致索引会降低增删改的速度;

4、哈希索引

除了B+树之外,还有一种常见的是哈希索引。

哈希索引就是采用一定的哈希算法,把键值换算成新的哈希值,检索时不需要类似B+树那样从根节点到叶子节点逐级查找,只需一次哈希算法即可立刻定位到相应的位置,速度非常快。

 本质上就是把键值换算成新的哈希值,根据这个哈希值来定位。

数据库两大必备神器:索引和锁底层原理是什么!

看起来哈希索引很牛逼啊,但其实哈希索引有好几个局限(根据他本质的原理可得):

 哈希索引也没办法利用索引完成排序;

 不支持最左匹配原则;

 在有大量重复键值情况下,哈希索引的效率也是极低的---->哈希碰撞问题;

 不支持范围查询;

5、InnoDB支持哈希索引吗?

主流的还是使用B+树索引比较多,对于哈希索引,InnoDB是自适应哈希索引的(hash索引的创建由InnoDB存储引擎引擎自动优化创建,我们干预不了)!

数据库两大必备神器:索引和锁底层原理是什么!

6、聚集和非聚集索引

简单概括:

 聚集索引就是以主键创建的索引;

 非聚集索引就是以非主键创建的索引;

区别:

 聚集索引在叶子节点存储的是表中的数据;

 非聚集索引在叶子节点存储的是主键和索引列;

 使用非聚集索引查询出数据时,拿到叶子上的主键再去查到想要查找的数据。(拿到主键再查找这个过程叫做回表)

非聚集索引也叫做二级索引,不用纠结那么多名词,将其等价就行了~

非聚集索引在建立的时候也未必是单列的,可以多个列来创建索引。

 此时就涉及到了哪个列会走索引,哪个列不走索引的问题了(最左匹配原则-->后面有说)

 创建多个单列(非聚集)索引的时候,会生成多个索引树(所以过多创建索引会占用磁盘空间)

数据库两大必备神器:索引和锁底层原理是什么!

在创建多列索引中也涉及到了一种特殊的索引-->覆盖索引

 我们前面知道了,如果不是聚集索引,叶子节点存储的是主键+列值

 最终还是要“回表”,也就是要通过主键再查找一次。这样就会比较慢

 覆盖索引就是把要查询出的列和索引是对应的,不做回表操作!

比如说:

 现在我创建了索引(username,age),在查询数据的时候:select username , age from user where username = 'Java3y' and age = 20。

很明显地知道,我们上边的查询是走索引的,并且,要查询出的列在叶子节点都存在!所以,就不用回表了~

 所以,能使用覆盖索引就尽量使用吧~

7、索引最左匹配原则

最左匹配原则:

 索引可以简单如一个列(a),也可以复杂如多个列(a, b, c, d),即联合索引。

 如果是联合索引,那么key也由多个列组成,同时,索引只能用于查找key是否存在(相等),遇到范围查询(>、<、between、like左匹配)等就不能进一步匹配了,后续退化为线性查找。

 因此,列的排列顺序决定了可命中索引的列数。

例子:

 如有索引(a, b, c, d),查询条件a = 1 and b = 2 and c > 3 and d = 4,则会在每个节点依次命中a、b、c,无法命中d。(很简单:索引命中只能是相等的情况,不能是范围匹配)

8、=、in自动优化顺序

不需要考虑=、in等的顺序,mysql会自动优化这些条件的顺序,以匹配尽可能多的索引列。

例子:

阅读延展

1
3