本文作者:kris

MySQL优化总结-查询总条数-mysql查询数据总条数

kris 2025-01-21 06:48:05 2
MySQL优化总结-查询总条数-mysql查询数据总条数摘要: mysql中按照日期分组查询数量?SELECT DATE_FORMAT(time,'%Y-%m-%d') as day, sum(case when amount>0...

mysql中按照日期分组查询数量?

SELECT DATE_FORMAT(time,'%Y-%m-%d') as day, sum(case when amount>0 then amount when amount=0 then 0 end) as amount1from table where time>='2014-11-01' group by day;我没有测试。time表示日期,amount表示数量。查询11月后每天成交数量

mysql多少条数引发性能瓶颈?

1. 一个表中默认最多 2^32 (~4.295E+09) 条记录。 2. 如果 with-big-tables 参数定义过了,则可以到 (2^32)^2 (1.844E+19) 条。 3. 理论上没有限制,同样注意操作系统对单个文件大小的限制。

mysql一条sql怎么统计某个字段不同值的个数?

1. 先查验是否是自己想要的结果SELECT concat(LEFT(name, CHAR_LENGTH(name) -1), '4') FROM userinfo;2. 更新update userinfo set name = concat(LEFT(name, CHAR_LENGTH(name) -1), '4') ;

mysql多表查询中,表的数量很大而且查询条件很多,加视图的话可不可以提高查询速度呢?

视图的方式可以“简化”查询逻辑,让查询看起来简单,但是如果多表查询性能差,对于视图的方式来说,要排查性能瓶颈还是比较困难的。所以优化的本质不会变,是基于资源的平衡,简化不能够解决性能问题。

加视图,最后还是查的这几张表,最好的就是将你需要的数据,通过代码的方式转的一张表里面,然后单表操作是最快的,对单表加索引,千万数据也能查的很快,如果数据量还是很大,还可以做成分区,针对分区去查,检索速度也会很快

问题

我们有一个 SQL,用于找到没有主键 / 唯一键的表,但是在 MySQL 5.7 上运行特别慢,怎么办?

实验

我们搭建一个 MySQL 5.7 的环境,此处省略搭建步骤。

写个简单的脚本,制造一批带主键和不带主键的表:

MySQL优化总结-查询总条数-mysql查询数据总条数

执行一下脚本:

现在执行以下 SQL 看看效果:

MySQL优化总结-查询总条数-mysql查询数据总条数

...

执行了 16.80s,感觉是非常慢了。

现在用一下 DBA 三板斧,看看执行计划:

感觉有点惨,由于 information_schema.columns 是元数据表,没有必要的统计信息。

那我们来 show warnings 看看 MySQL 改写后的 SQL:

MySQL优化总结-查询总条数-mysql查询数据总条数

我们格式化一下 SQL:

可以看到 MySQL 将

select from A where A.x not in (select x from B) //非关联子查询

转换成了

select from A where not exists (select 1 from B where B.x = a.x) //关联子查询

如果我们自己是 MySQL,在执行非关联子查询时,可以使用很简单的策略:

select from A where A.x not in (select x from B where ...) //非关联子查询:1. 扫描 B 表中的所有记录,找到满足条件的记录,存放在临时表 C 中,建好索引2. 扫描 A 表中的记录,与临时表 C 中的记录进行比对,直接在索引里比对,

而关联子查询就需要循环迭代:

select from A where not exists (select 1 from B where B.x = a.x and ...) //关联子查询扫描 A 表的每一条记录 rA: 扫描 B 表,找到其中的第一条满足 rA 条件的记录。

显然,关联子查询的扫描成本会高于非关联子查询。

我们希望 MySQL 能先"缓存"子查询的结果(缓存这一步叫物化,MATERIALIZATION),但MySQL 认为不缓存更快,我们就需要给予 MySQL 一定指导。

...

MySQL优化总结-查询总条数-mysql查询数据总条数

可以看到执行时间变成了 0.67s。

整理

我们诊断的关键点如下:

\1. 对于 information_schema 中的元数据表,执行计划不能提供有效信息。

\2. 通过查看 MySQL 改写后的 SQL,我们猜测了优化器发生了误判。

\3. 我们增加了 hint,指导 MySQL 正确进行优化判断。

但目前我们的实验仅限于猜测,猜中了万事大吉,猜不中就无法做出好的诊断。

文章版权及转载声明

作者:kris本文地址:https://www.damoyx.com/p/25545.html发布于 2025-01-21 06:48:05
文章转载或复制请以超链接形式并注明出处大漠游侠网

阅读
分享