首页 > 数据库技术 > 详细

眼睁睁地踩到 MySQL in 子查询的“坑”

时间:2021-03-22 22:45:19      阅读:53      评论:0      收藏:0      [点我收藏+]
眼睁睁地踩到 MySQL in 子查询的“坑”

PlatformDev 360云计算

女主宣言

什么情况? 一个简单的 SQL 子查询,在几万条记录中查询,竟然用了 33 秒!快来看看,怎么跳过这个坑。
PS:丰富的一线技术、多元化的表现形式,尽在“HULK一线技术杂谈”,点关注哦!

前言

MySQL 是项目中常用的数据库,其中 in 查询也是很常用。最近项目调试过程中,遇到一个出乎意料的 select 查询,竟然用了 33 秒!

一、表结构

1. userinfo 表
技术分享图片

2. article 表
技术分享图片

二、问题 SQL 实例

select * from userinfo where id in (select author_id from artilce where type = 1);

大家第一眼看到上面的 SQL 时,可能都会觉得这是一个很简单的子查询。先把 author_id 查出来,再用 in 查询一下。

如果有相关索引会非常快的,拆解来讲就是以下这样的:

  1. select author_id from artilce where type = 1;
  2. select * from userinfo where id in (1,2,3);

但是事实是这样的:

mysql> select count(*) from userinfo;
技术分享图片

mysql> select count(*) from article;
技术分享图片

mysql> select id,username from userinfo where id in (select author_id from article where type = 1);
技术分享图片

33 秒!为什么会这么慢呢?

三、问题原因

官方文档解释:in 子句在查询的时候有时会被转换为 exists 的方式来执行,变成逐条记录进行遍历(版本 5.5 中存在,5.6 中已做优化)。

技术分享图片
参考:
https://dev.mysql.com/doc/refman/5.5/en/subquery-optimization.html

四、解决方式(版本 5.5)

1. 使用临时表


select id,username from userinfo 
where id in (select author_id from 
    (select author_id from article where type = 1) as tb
);

技术分享图片

2. 使用 join


select a.id,a.username from userinfo a, article b 
where a.id = b.author_id and b.type = 1;

技术分享图片

五、补充

版本 5.6 已针对子查询做了优化,方式跟【四】中的临时表方式一样,参考官方文档:


If materialization is not used, the optimizer sometimes rewrites a noncorrelated subquery as a correlated subquery.

For example, the following IN subquery is noncorrelated  ( where_condition involves only columns from t2 and not t1 ):

select * from t1 
where t1.a in (select t2.b from t2 where where_condition);

The optimizer might rewrite this as an EXISTS correlated subquery:

select * from t1 
where exists (select t2.b from t2 where where_condition and t1.a=t2.b);

Subquery materialization using a temporary table avoids such rewrites and makes it possible to execute the subquery only once rather than once per row of the outer query.

https://dev.mysql.com/doc/refman/5.6/en/subquery-materialization.html

眼睁睁地踩到 MySQL in 子查询的“坑”

原文:https://blog.51cto.com/15127564/2668518

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!