一、反常的SQL语句

某周四午休时候,我正在工位上小憩,睡梦中好像看到了本人拿着李白在光荣峡谷里大杀四方的情景,就在我刚拿完五杀筹备率领队友推对面水晶的时候,一句慌乱短促的“糟了”把我从睡梦中惊醒。

我眯开朦胧的双眼,才发现方才的发声来源于我的组长庄哥,看到他在缓和的点开日志零碎查看日志,我预感到有什么不妙的事件产生,认真一问才晓得,原来就在我眯眼的期间,线上数据库服务器的CPU被打满,同时触发了生产数据库只读提早的限定工夫并且收回告警,而且告警的过程继续了半个小时。

这让我倒吸了一口凉气,因为咱们组做的零碎很多都用的是同一个数据库服务器,日用户沉闷量有好几十万,如果服务器解体了将会使所有的零碎服务都不可用,于是咱们连忙通过SQL日志进行问题查找,最初排查进去是因为一张SQL的高量查问没有走索引导致,日志列表显示,这条sql语句的扫描行数达到了上百万,根本就是全表扫描的状况,而且半个小时的工夫查问了达上万次,每条SQL查问的耗时都在3000ms以上。

我的天啊,难怪服务器会CPU打满,这么一条耗时的SQL语句查问量这么大,数据库的资源当然是间接就解体了,这是过后那条SQL的查问状况:

二、长期解决

看了这条语句,我又倒吸一口凉气,这不就是我写的零碎调用的SQL语句吗?完了,这回逃不掉了,真是人在睡梦里,锅从天上来。

当然,因为是我本人写的SQL,所以我一看就晓得这条语句是有问题的。

依据我的代码解决,这条sql的调用还少了个重要的参数user\_fruit\_id,这个参数没有传的话是不应该走这条sql查问的,在我的设计里,该参数是数据表里一个联结索引的最左侧字段,如果该字段没有传值的话,那么索引就不会失效了。

KEY \`idx\_userfruitid\_type\` (    \`user\_fruit\_id\`,    \`task\_type\`,    \`receive\_start\_time\`,    \`receive\_end\_time\`  ) USING BTREE

尽管定位到了SQL语句,然而线上的问题迫不及待,总不可能找出bug改完再上线吧,所以,咱们只能做了一个长期解决,就是在原来的表上多加了一个联结索引,其实就是去掉了user\_fruit\_id 字段,让这些高量的查问都能走新的索引,就像上面这样:

KEY \`idx\_task\_type\_receive\_start\_time\` (   \`task\_type\`,   \`receive\_start\_time\`,   \`receive\_end\_time\`,   \`created\_time\`  ) USING BTREE

加上索引后,sql的扫描行数就大幅度的升高了,重启实例后就又能失常运行了。

三、最左匹配准则

那么为什么最左侧的字段没传索引就不失效了,这是因为MySQL的联结索引是基于“最左匹配准则”匹配的。

咱们都晓得,索引的底层是B+树结构,联结索引的构造也是B+树,只不过键值数量不是一个,而是多个,构建一颗B+树只能依据一个值来构建,因而数据库根据联结索引最左的字段来构建B+树。

例如咱们用两个字段(name,age)这个联结索引来剖析,

当咱们在where条件中查找name为“张三”的所有记录的时候,能够疾速定位到ID4,并且查出所有蕴含“张三”的记录,而如果要查找“张三,10”这一条特定的数据,就能够用 name = "张三" and age = 10 获取。

因为联结索引的键值对是两个,所以只有后面的name确定的状况下就能够进一步定位到具体的age记录,然而如果你的查问条件只有age的话,那么索引就不会失效,因为没有匹配最右边的字段,前面所有的索引字段都不会失效,所以我之前写的sql语句才会因为少了最右边的user\_fruit\_id字段而走了全表扫描的查问形式。

失常来说,假如一个联结索引设计成(a,b)这样的构造的话,那么用a and b作为条件,或者a独自作为查问条件都会走索引,这种状况下咱们就不要再为a字段独自设计索引了。

但如果查问条件外面只有b的语句,是无奈应用(a,b)这个联结索引的,这时候你不得不保护另外一个索引,也就是说你须要同时保护(a,b)、(b) 这两个索引。

四、找出Bug

尽管长期做了解决,但问题并不算解决,很显著是零碎呈现了bug才会有走这样的查问条件。

因为是我本人写的代码,所以晓得是哪条SQL后我就马上定位到了代码里的具体方法,起初才发现是因为我对user\_fruit\_id字段的判空解决不失效所致。

因为该字段是从调用方传过来的,所以我在办法参数里对该字段做了非空限度的注解,也就是javax包下的@NotNull。

public class GardenUserTaskListReq implements Serializable {        private static final long serialVersionUID = -9161295541482297498L;        @ApiModelProperty(notes = "水果id")      @NotNull(message = "水果id不能为空")      private Long userFruitId;      /\*\*以下省略\*/      .....................  }

尽管加上该注解来做非空校验,但我却没有在参数加上另一个注解@Validated,该注解如果没加上的话,那么调用javax包下的校验规定就都不失效,正确的写法是在controller层办法的参数后面加上注解:

除此之外,因为user\_fruit\_id这个字段是另一张表的主键,我在代码里也没有对这张表是否存在这个id做查问判断,这样一来,无论调用方传什么值过去都会间接触发sql查问,并且在不跑索引的状况下间接走全表扫描。

不得不说,这真是个低级谬误,说真的,我对这个起因真是感到嘀笑皆非,再怎么说也工作几年了,怎么还犯一些老手级别的谬误呢,这脸打得真是让我相当羞愧。

五、总结

尽管是低级谬误,但造成的结果也算挺重大了,这次事件也让我更加的警醒,在当前的开发工作中必须要恪守该有的准则,大略有这么几点:

1、不能置信调用端

重要的参数都要先做验证,即便是非空值也须要做验证,不符合条件的就要间接返回或抛异样,不能参加业务sql的查问,否则频繁的拜访也会对服务造成累赘。

2、SQL语句要先做性能查问

对于数据量大的表,建好索引后,所有的SQL查问语句要用explain检测性能,并且依据后果来进一步优化索引。

3、代码必须要review

之前我没有放太大的精力在代码的review上,虽说跟迭代排期的紧凑也有关系,但不管怎么说,bug的确是我的忽略造成的,尤其是像空值这种细小的谬误在Java里能够说粗茶淡饭。

千里之堤毁于蚁穴,有时一个小bug很容易就引发整个零碎的崩盘,这一次的问题也让我更加粗浅的意识到了review代码的重要性,不论业务开发的工作量有多麻烦,这一步操作相对不能漠视。