博客
关于我
MySQL(九)SQL优化
阅读量:640 次
发布时间:2019-03-14

本文共 2649 字,大约阅读时间需要 8 分钟。

一索引对DML语句效率的影响

在数据库环境中,CPU资源的90%被用来解析和执行SQL语句,因此提高SQL语句执行效率对高并发系统至关重要。而在众多的SQL语句中,SELECT查询语句应用最为广泛。要加快查询速度,使用索引是最有效的手段。当数据量较大时,MySQL提供了表分区等技术,其核心目标是降低数据库磁盘I/O开销,从而提升查询速度,减少磁盘读取量。


2实验准备

在实际应用中,当表数据量较大时,使用索引的优势将变得更加明显。以下是创建数据库及相关存储过程的步骤:

  • 创建测试数据库
  • create database test;use test;create table t(id int, name varchar(30));
    1. 创建存储过程proc1用于插入数据
    2. delimiter $$create procedure proc1(cnt int)begin  declare i int default 1;  start transaction;  repeat    insert into t(id, name) values(i, concat('a', i));    set i = i + 1;  until i > cnt  end repeat;  commit;end$$delimiter;
      1. 调用存储过程插入数据
      2. call proc1(1000000);
        1. 验证数据插入情况
        2. select count(*) from t;select * from t limit 5;

          3explain语句解析

          通过使用explain语句,可以深入了解MySQL服务器对SQL语句的执行过程。这是优化数据库性能的重要工具。

          explain select * from test.t;

          4百万记录取一条

          在实际应用中,单独查询特定记录的效率至关重要。以下是相关测试和优化过程:

        3. 查询单条记录
        4. -- 无索引,耗时长select * from t where id=1500;-- 几乎无效索引create index idx_id on t(id);-- 只需0.05秒select * from t where id=1500;
          1. 执行explain分析
          2. explain select * from t where id=1500;
            1. 索引优化效果
            2. -- 创建唯一索引create unique index idx_id on t(id);-- 索引已生效select * from t where id=1500;

              5百万记录取1000条

              在实际应用中,高效查询并不总是通过索引实现。以下是相关测试和优化过程:

            3. 无索引查询
            4. -- 无索引,耗时长select * from t where id between 1001 and 2000;
              1. 索引优化查询
              2. create index idx_id on t(id);select * from t where id between 1001 and 2000;
                1. 优化效果说明
                2. -- 建议:索引优化后的查询效率提升显著

                  6百万记录更新一条数据

                  在实际应用中,定位数据的准确性是优化 UPDATE 语句的关键。以下是相关测试和优化过程:

                3. 无索引更新
                4. update t set name='china' where id=1;
                  1. 索引优化更新
                  2. create index idx_id on t(id);update t set name='china' where id=1;
                    1. 优化效果说明
                    2. -- 索引优化后的更新效率更佳

                      7总结

                      从以上测试可以得出以下结论:

                    3. 索引的双刃剑效应:索引能够显著提升特定查询的执行效率,但也会增加数据表的存储空间和增删改操作的复杂度。
                    4. 索引应用原则:应重点创建那些经常查询条件字段的单列或多列索引,但需确保这些字段的查询条件记录数控制在总数据量的3%-5%以内。
                    5. 多列索引优化:在创建多列索引时,应将筛选数据最多的字段放在索引的最左侧,以便优化器优先利用这些高效筛选字段。

                    6. 8SQL语句优化技巧

                    7. 避免使用表达式作为查询条件
                    8. -- 不推荐select * from t where id-1 < 5;-- 简化方式select * from t where id < 5-1;
                      1. 或某些情况优于in
                      2. -- 适用于连续值查询select * from t where name between 'a1500' and 'a2000';
                        1. where子句优于having子句
                        2. -- where子句适合直接缩减查询结果集
                          1. 使用like时注意位置
                          2. -- 不推荐select * from t where name like 'a150_';-- 建议将通配符放在右侧

                            9表分区对查询效率的影响

                            通过表分区可以显著降低数据库的I/O负载,提升查询效率。以下是相关操作和测试过程:

                          3. 创建分区表
                          4. create table t1(id int, name varchar(30))partition by range(id)(  partition p1 values less than (200000),  partition p2 values less than (400000),  partition p3 values less than (600000),  partition p4 values less than (800000),  partition p5 values less than (1000000),  partition p6 values less than (maxvalue));
                            1. 数据迁移与查询测试
                            2. insert into t1 select * from t;
                              1. 查询效率对比
                              2. -- 无索引查询select * from t where id=1500;select * from t1 where id=1500;-- 查询未利用分区字段select * from t1 where name='a1500';

                                10总结

                                通过上述实验和分析,我们可以清晰地看到索引、SQL优化以及表分区等技术对数据库性能的重要提升作用。无论是查询效率还是更新定位准确性,这些技术都发挥了关键作用。不过,需要注意索引的使用成本和表分区的划分策略,以保持数据库的高效运行。

    转载地址:http://msylz.baihongyu.com/

    你可能感兴趣的文章
    NIFI大数据进阶_实时同步MySql的数据到Hive中去_可增量同步_实时监控MySql数据库变化_操作方法说明_01---大数据之Nifi工作笔记0033
    查看>>
    NIFI大数据进阶_离线同步MySql数据到HDFS_01_实际操作---大数据之Nifi工作笔记0029
    查看>>
    NIFI大数据进阶_离线同步MySql数据到HDFS_02_实际操作_splitjson处理器_puthdfs处理器_querydatabasetable处理器---大数据之Nifi工作笔记0030
    查看>>
    NIFI大数据进阶_连接与关系_设置数据流负载均衡_设置背压_设置展现弯曲_介绍以及实际操作---大数据之Nifi工作笔记0027
    查看>>
    NIFI数据库同步_多表_特定表同时同步_实际操作_MySqlToMysql_可推广到其他数据库_Postgresql_Hbase_SqlServer等----大数据之Nifi工作笔记0053
    查看>>
    NIFI汉化_替换logo_二次开发_Idea编译NIFI最新源码_详细过程记录_全解析_Maven编译NIFI避坑指南001---大数据之Nifi工作笔记0068
    查看>>
    NIFI汉化_替换logo_二次开发_Idea编译NIFI最新源码_详细过程记录_全解析_Maven编译NIFI避坑指南002---大数据之Nifi工作笔记0069
    查看>>
    NIFI集群_内存溢出_CPU占用100%修复_GC overhead limit exceeded_NIFI: out of memory error ---大数据之Nifi工作笔记0017
    查看>>
    NIFI集群_队列Queue中数据无法清空_清除队列数据报错_无法删除queue_解决_集群中机器交替重启删除---大数据之Nifi工作笔记0061
    查看>>
    NIH发布包含10600张CT图像数据库 为AI算法测试铺路
    查看>>
    Nim教程【十二】
    查看>>
    Nim游戏
    查看>>
    NIO ByteBuffer实现原理
    查看>>
    Nio ByteBuffer组件读写指针切换原理与常用方法
    查看>>
    NIO Selector实现原理
    查看>>
    nio 中channel和buffer的基本使用
    查看>>
    NIO三大组件基础知识
    查看>>
    NIO与零拷贝和AIO
    查看>>
    NIO同步网络编程
    查看>>
    NIO基于UDP协议的网络编程
    查看>>