Mysql实战调优拾遗三
创始人
2024-01-17 16:28:43
0次

Mysql实战调优拾遗三

      • 优化小细节（续）
      • 索引监控
      • 查询优化
        • 查询慢的原因
        • 优化数据访问
      • 执行过程的优化
        • 查询缓存
        • 语法解析和预处理
        • 查询优化器
        • 优化器的优化策略
        • 优化器的优化类型
        • 关联与排序优化
      • 优化特定类型的查询
        • 优化count查询
        • 优化关联查询
        • 优化子查询
        • 优化group by 和 distinct
      • 推荐使用用户自定义变量
      • 分区表
        • 分区表类型
          • 范围分区
          • 列表分区
          • 列分区
          • hash分区
          • key分区
          • 子分区
      • 如何使用分区
      • 使用分区表注意事项

优化小细节（续）

1、创建索引的列，不允许为空，可能会得到不符合预期的结果

2、当需要进行表连接的时候，最好不要超过三张表，因为需要join的字段，数据类型必须一致。【使用nest-loop算法（嵌套循环）】

在这里插入图片描述
在这里插入图片描述
A join B，Mysql内部优化机制不一定是先读A再读B【一般小表join大表】
在这里插入图片描述
所有的索引和内存（join buffer）都不满足的话，就只能走simple nestedloop join了,所以在实际情况下如果要用到join且join buffer内容比较多的时候要调整join buffer的大小。
在这里插入图片描述
262144/1024 = 256k
在这里插入图片描述
如上两个查询谁的写法更优秀？
单从结果上看是一样的再用explain分析一下发现效果都差不多。
在这里插入图片描述
当使用内连接的时候，join两种方式结果一样
当使用左外连接的时候，会把左表的数据全部查出
当使用右外连接的时候，会把右表中的数据全部查出
and是在表连接前过滤A表或B表里面哪些记录符合连接条件，同时会兼顾是left join 还是right join，即加入是左连接的话，如果左边表的某条记录不符合连接条件，那么它不进行连接，但是仍然保留在结果集中（此时右边部分的连接结果为NULL）。on条件是在生成临时表时使用的条件，它不管on中的条件是否为真，都会返回左边表中的记录。
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

3、如果明确知道只有一条结果返回，limit 1 能够提高效率。【limit限制输出】能使用limit的时候尽量使用limit

4、单表索引建议控制在5个以内（建立的索引越多树就越大IO就越多，同时表字段如果为空的话也会占用额外空间）

5、单索引字段数不允许超过5个（列过多最左匹配原则，后面的那些列要查询的话必须要把前面列补齐，还要维护多个列信息）

6、
在这里插入图片描述

索引监控

https://dev.mysql.com/doc/refman/5.7/en/index-extensions.html
在这里插入图片描述
在这里插入图片描述
如果第二个和最后一个比较大的话，说明命中索引的比较多，效果好，如果小的话索引使用较差

查询优化

查询慢的原因

在这里插入图片描述
MYISAM：有两种锁，共享读锁，独占写锁（表锁）
Innodb：共享锁，排他锁（表锁，行锁）锁的是索引
自增锁
间隙锁

优化数据访问

在这里插入图片描述
查询不需要的记录：
我们常常会误以为mysql会只返回需要的数据，实际上mysql却是先返回全部结果再进行计算，在日常的开发习惯中，经常是先用select语句查询大量的结果，然后获取前面的N行后关闭结果集。
优化方式是在查询后面添加limit

多表关联时返回全部列：
select * from actor inner join film_actor using(actor_id) inner join film using(film_id) where film.title=‘Academy Dinosaur’;
select actor. from actor…;*

总是检索全部列：
在公司的企业需求中，禁止使用select *,虽然这种方式能够简化开发，但是会影响查询的性能，所以尽量不要使用

重复查询相同的数据：
如果需要不断的重复执行相同的查询，且每次返回完全相同的数据，因此，基于这样的应用场景，我们可以将这部分数据缓存起来，这样的话能够提高查询效率【推荐redis】

建议表名后面加别名，词法解析会直接匹配别名就不会去检索表了

如下查询rental_date第一个使用了索引第二个未使用索引，原因在于rows，如果查询的数据很大的话则不会使用索引来排序，因为这样效率是很低的。【rows超过一定阈值会触发】
在这里插入图片描述
如下检索了16005条数据，但是我只要5条，limit的第一个值很大的话会进行一个全表扫描
在这里插入图片描述

执行过程的优化

查询缓存

在解析一个查询语句之前，如果查询缓存是打开的，那么mysql会优先检查这个查询是否命中查询缓存中的数据，如果查询恰好命中了查询缓存，那么会在返回结果之前会检查用户权限，如果权限没有问题，那么mysql会跳过所有的阶段，就直接从缓存中拿到结果并返回给客户端

语法解析和预处理

mysql查询完缓存之后会经过以下几个步骤：解析SQL、预处理、优化SQL执行计划，这几个步骤出现任何的错误，都可能会终止查询

mysql通过关键字将SQL语句进行解析，并生成一颗解析树，mysql解析器将使用mysql语法规则验证和解析查询，例如验证使用使用了错误的关键字或者顺序是否正确等等，预处理器会进一步检查解析树是否合法，例如表名和列名是否存在，是否有歧义，还会验证权限等等

查询优化器

CBO基于成本优化（更多选择）
RBO基于规则的优化
当语法树没有问题之后，相应的要由优化器将其转成执行计划，一条查询语句可以使用非常多的执行方式，最后都可以得到对应的结果，但是不同的执行方式带来的效率是不同的，优化器的最主要目的就是要选择最有效的执行计划
mysql使用的是基于成本的优化器，在优化的时候会尝试预测一个查询使用某种查询计划时候的成本，并选择其中成本最小的一个
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
1、InnoDB因为其mvcc的架构，并不能维护一个数据表的行数的精确统计信息
2、有时候某个执行计划虽然需要读取更多的页面，但是他的成本却更小，因为如果这些页面都是顺序读或者这些页面都已经在内存中的话，那么它的访问成本将很小，mysql层面并不知道哪些页面在内存中，哪些在磁盘，所以查询之际执行过程中到底需要多少次IO是无法得知的
3、mysql的优化是基于成本模型的优化，但是有可能不是最快的优化

5、mysql不考虑不受其控制的操作成本：执行存储过程或者用户自定义函数的成本

优化器的优化策略

在这里插入图片描述

优化器的优化类型

内连接比外连接效率高的原因，内连接获取数据的数量要少于外连接。
在这里插入图片描述
优化min() max() ,count()
索引和列是否可以为空通常可以帮助mysql优化这类表达式：例如，要找到某一列的最小值，只需要查询索引的最左端的记录即可，不需要全文扫描比较（group by limit 1）

预估并转化为常数表达式，当mysql检测到一个表达式可以转化为常数的时候，就会一直把该表达式作为常数进行处理
explain select film.film_id,film_actor.actor_id from film inner join film_actor using(film_id) where film.film_id = 1

子查询优化：
mysql在某些情况下可以将子查询转换一种效率更高的形式，从而减少多个查询多次对数据进行访问，例如将经常查询的数据放入到缓存中

等值传播：
如果两个列的值通过等式关联，那么mysql能够把其中一个列的where条件传递到另一个上：
explain select film.film_id from film inner join film_actor using(film_id) where film.film_id > 500;
这里使用film_id字段进行等值关联，film_id这个列不仅适用于film表而且适用于film_actor表
explain select film.film_id from film inner join film_actor using(film_id) where film.film_id > 500 and film_actor.film_id > 500;

关联与排序优化

在这里插入图片描述

在这里插入图片描述
案例演示：
查看不同的顺序执行方式对查询性能的影响：
explain select film.film_id,film.title,film.release_year,actor.actor_id,actor.first_name,actor.last_name from film inner join f
ilm_actor using(film_id) inner join actor using(actor_id);
查看执行的成本：
show status like ‘last_query_cost’;
按照自己预想的规定顺序执行：
explain select straight_join film.film_id,film.title,film.release_year,actor.actor_id,actor.first_name,actor.last_name from fil
m inner join film_actor using(film_id) inner join actor using(actor_id);
查看执行的成本：
show status like ‘last_query_cost’;
在这里插入图片描述
在这里插入图片描述
第二张图读了1006行数据，第一张图读了228条数据，显然第一张图对应的方式效率高，这是因为mysql内部优化器来决定顺序的。

在这里插入图片描述
在这里插入图片描述
基于mysql的优化器的某些应用场景下查询出来的表顺序可能和写的顺序不太一样。

在这里插入图片描述
两次传输排序：
第一次数据读取是将需要排序的字段读取出来，然后进行排序，第二次是将排好序的结果按照需要去读取数据行。
这种方式效率比较低，原因是第二次读取数据的时候因为已经排好序，需要去读取所有记录而此时更多的是随机IO，读取数据成本会比较高
两次传输的优势，在排序的时候存储尽可能少的数据，让排序缓冲区可以尽可能多的容纳行数来进行排序操作

一次传输排序：
先读取查询所需要的所有列，然后再根据给定列进行排序，最后直接返回排序结果，此方式只需要一次顺序IO读取所有的数据，而无须任何的随机IO，问题在于查询的列特别多的时候，会占用大量的存储空间，无法存储大量的数据

优化特定类型的查询

优化count查询

在这里插入图片描述
总有人认为myisam的count函数比较快，这是有前提条件的，只有没有任何where条件的count()才是比较快的【MyIsam会有一个变量来记录插入的行数，所以count()会快一点】
使用近似值：
在某些应用场景中，不需要完全精确的值，可以参考使用近似值来代替，比如可以使用explain来获取近似的值
其实在很多OLAP的应用中，需要计算某一个列值的基数，有一个计算近似值的算法叫hyperloglog。
更复杂的优化：
一般情况下，count()需要扫描大量的行才能获取精确的数据，其实很难优化，在实际操作的时候可以考虑使用索引覆盖扫描，或者增加汇总表，或者增加外部缓存系统。
在这里插入图片描述
在这里插入图片描述
同时发现他们的explain分析的结果也是一样的
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
所以count()查询和括号里面写啥是没关系的

优化关联查询

在这里插入图片描述
使用on或using子句：
当表A和表B使用列C关联的时候，如果优化器的关联顺序是B、A，那么就不需要再B表的对应列上建上索引，没有用到的索引只会带来额外的负担，一般情况下来说，只需要在关联顺序中的第二个表的相应列上创建索引

优化子查询

子查询的优化最重要的优化建议是尽可能使用关联查询代替。
子查询的结果会被暂时放入临时表里面

优化group by 和 distinct

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
如上图发现一个查询是有199行数据另一个有200行数据，结合第一个查询的结果以及第二个查询的结果发现是susan这个值重复了。

在这里插入图片描述
在这里插入图片描述
也就是说我表里面不带有重复字段的时候我可以使用第二种方式来完成查询

在很多应用场景中我们需要将数据进行分页，一般会使用limit加上偏移量的方法实现，同时加上合适的orderby 的子句，如果这种方式有索引的帮助，效率通常不错，否则的化需要进行大量的文件排序操作，还有一种情况，当偏移量非常大的时候，前面的大部分数据都会被抛弃，这样的代价太高。
要优化这种查询的话，要么是在页面中限制分页的数量，要么优化大偏移量的性能
在这里插入图片描述
mysql总是通过创建并填充临时表的方式来执行union查询，因此很多优化策略在union查询中都没法很好的使用。经常需要手工的将where、limit、order by等子句下推到各个子查询中，以便优化器可以充分利用这些条件进行优化

推荐使用用户自定义变量

在这里插入图片描述

2、查询获取演过最多电影的前10名演员，然后根据出演电影次数做一个排名
这里做一个子查询的目的是因为在group by分组之前会对所有的值进行加法操作
在这里插入图片描述
赋值和读取变量的时候可能是在查询的不同阶段：
actor表有两个索引，一个是主键actor_id，一个是last_name索引。当查询语句覆盖索引的时候，使用条件查询的同时，也对数据进行排序；而查询语句没有覆盖索引的时候，先使用条件查询出数据，然后再对查出的数据进行排序，同时回表查数据；
而rownum赋值就在排序的时候进行的，所以，查询没有覆盖索引的时候，由于查数时没有进行排序，所以rownum一直是0；而当查询覆盖了索引的时候，由于查数的同时排序，所以rownum就一直在增长，导致只有两条数据满足rownum<=1；

在这里插入图片描述
在这里插入图片描述
select @@autocommit：一个@表示用户变量 2个@表示系统变量

行转列：
oracle:
join
union
decode
case when
mysql:
join
union
case when
在这里插入图片描述
timestamp是四字节存储，就会导致数据只存到2038年，从1970到2038年的秒数算到为2的31次方减一

分区表

参考链接：
https://dev.mysql.com/doc/refman/5.7/en/partitioning.html

把一张表分成很多个文件进行分区，按照列分区，按照范围分区，按照hash进行散列分区。
分库分表
垂直切分：
按表分服务器存储，将请求分发到不同服务器里面
水平切分：
1个表里面有很多条记录，将表里面的记录按照范围划分为多张表（分区表比较类似）
在这里插入图片描述
索引的互斥访问：
1、innodb加锁是给索引加锁，有的时候等待时间会很长，所以用了分区表以后将分区表分布在不同的物理机上面效率会升高
在这里插入图片描述
分区表底层原理：
​ 分区表由多个相关的底层表实现，这个底层表也是由句柄对象(inode)标识，我们可以直接访问各个分区。存储引擎管理分区的各个底层表和管理普通表一样（所有的底层表都必须使用相同的存储引擎），分区表的索引只是在各个底层表上各自加上一个完全相同的索引。从存储引擎的角度来看，底层表和普通表没有任何不同，存储引擎也无须知道这是一个普通表还是一个分区表的一部分。

​ 分区表的操作按照以下的操作逻辑进行：

​ select查询

​ 当查询一个分区表的时候，分区层先打开并锁住所有的底层表，优化器先判断是否可以过滤部分分区，然后再调用对应的存储引擎接口访问各个分区的数据

​ insert操作

​ 当写入一条记录的时候，分区层先打开并锁住所有的底层表，然后确定哪个分区接受这条记录，再将记录写入对应底层表

​ delete操作

​ 当删除一条记录时，分区层先打开并锁住所有的底层表，然后确定数据对应的分区，最后对相应底层表进行删除操作

​ update操作

​ 当更新一条记录时，分区层先打开并锁住所有的底层表，mysql先确定需要更新的记录再哪个分区，然后取出数据并更新，再判断更新后的数据应该再哪个分区，最后对底层表进行写入操作，并对源数据所在的底层表进行删除操作。
​ 有些操作时支持过滤的，例如，当删除一条记录时，MySQL需要先找到这条记录，如果where条件恰好和分区表达式匹配，就可以将所有不包含这条记录的分区都过滤掉，这对update同样有效。如果是insert操作，则本身就是只命中一个分区，其他分区都会被过滤掉。mysql先确定这条记录属于哪个分区，再将记录写入对应得曾分区表，无须对任何其他分区进行操作。
​ 虽然每个操作都会“先打开并锁住所有的底层表”，但这并不是说分区表在处理过程中是锁住全表的，如果存储引擎能够自己实现行级锁，例如innodb，则会在分区层释放对应表锁。

分区表类型

在这里插入图片描述

范围分区

https://dev.mysql.com/doc/refman/5.7/en/partitioning-range.html
​ 范围分区表的分区方式是：每个分区都包含行数据且分区的表达式在给定的范围内，分区的范围应该是连续的且不能重叠，可以使用values less than运算符来定义。

​ 1、创建普通的表

CREATE TABLE employees (id INT NOT NULL,fname VARCHAR(30),lname VARCHAR(30),hired DATE NOT NULL DEFAULT '1970-01-01',separated DATE NOT NULL DEFAULT '9999-12-31',job_code INT NOT NULL,store_id INT NOT NULL
);

​ 2、创建带分区的表，下面建表的语句是按照store_id来进行分区的，指定了4个分区

CREATE TABLE employees (id INT NOT NULL,fname VARCHAR(30),lname VARCHAR(30),hired DATE NOT NULL DEFAULT '1970-01-01',separated DATE NOT NULL DEFAULT '9999-12-31',job_code INT NOT NULL,store_id INT NOT NULL
)
PARTITION BY RANGE (store_id) (PARTITION p0 VALUES LESS THAN (6),PARTITION p1 VALUES LESS THAN (11),PARTITION p2 VALUES LESS THAN (16),PARTITION p3 VALUES LESS THAN (21)
);
--在当前的建表语句中可以看到，store_id的值在1-5的在p0分区，6-10的在p1分区，11-15的在p3分区，16-20的在p4分区，但是如果插入超过20的值就会报错，因为mysql不知道将数据放在哪个分区

​ 3、可以使用less than maxvalue来避免此种情况

CREATE TABLE employees (id INT NOT NULL,fname VARCHAR(30),lname VARCHAR(30),hired DATE NOT NULL DEFAULT '1970-01-01',separated DATE NOT NULL DEFAULT '9999-12-31',job_code INT NOT NULL,store_id INT NOT NULL
)
PARTITION BY RANGE (store_id) (PARTITION p0 VALUES LESS THAN (6),PARTITION p1 VALUES LESS THAN (11),PARTITION p2 VALUES LESS THAN (16),PARTITION p3 VALUES LESS THAN MAXVALUE
);
--maxvalue表示始终大于等于最大可能整数值的整数值

​ 4、可以使用相同的方式根据员工的职务代码对表进行分区

CREATE TABLE employees (id INT NOT NULL,fname VARCHAR(30),lname VARCHAR(30),hired DATE NOT NULL DEFAULT '1970-01-01',separated DATE NOT NULL DEFAULT '9999-12-31',job_code INT NOT NULL,store_id INT NOT NULL
)
PARTITION BY RANGE (job_code) (PARTITION p0 VALUES LESS THAN (100),PARTITION p1 VALUES LESS THAN (1000),PARTITION p2 VALUES LESS THAN (10000)
);

​ 5、可以使用date类型进行分区：如虚妄根据每个员工离开公司的年份进行划分，如year(separated)

CREATE TABLE employees (id INT NOT NULL,fname VARCHAR(30),lname VARCHAR(30),hired DATE NOT NULL DEFAULT '1970-01-01',separated DATE NOT NULL DEFAULT '9999-12-31',job_code INT,store_id INT
)
PARTITION BY RANGE ( YEAR(separated) ) (PARTITION p0 VALUES LESS THAN (1991),PARTITION p1 VALUES LESS THAN (1996),PARTITION p2 VALUES LESS THAN (2001),PARTITION p3 VALUES LESS THAN MAXVALUE
);

​ 6、可以使用函数根据range的值来对表进行分区，如timestampunix_timestamp()

CREATE TABLE quarterly_report_status (report_id INT NOT NULL,report_status VARCHAR(20) NOT NULL,report_updated TIMESTAMP NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP
)
PARTITION BY RANGE ( UNIX_TIMESTAMP(report_updated) ) (PARTITION p0 VALUES LESS THAN ( UNIX_TIMESTAMP('2008-01-01 00:00:00') ),PARTITION p1 VALUES LESS THAN ( UNIX_TIMESTAMP('2008-04-01 00:00:00') ),PARTITION p2 VALUES LESS THAN ( UNIX_TIMESTAMP('2008-07-01 00:00:00') ),PARTITION p3 VALUES LESS THAN ( UNIX_TIMESTAMP('2008-10-01 00:00:00') ),PARTITION p4 VALUES LESS THAN ( UNIX_TIMESTAMP('2009-01-01 00:00:00') ),PARTITION p5 VALUES LESS THAN ( UNIX_TIMESTAMP('2009-04-01 00:00:00') ),PARTITION p6 VALUES LESS THAN ( UNIX_TIMESTAMP('2009-07-01 00:00:00') ),PARTITION p7 VALUES LESS THAN ( UNIX_TIMESTAMP('2009-10-01 00:00:00') ),PARTITION p8 VALUES LESS THAN ( UNIX_TIMESTAMP('2010-01-01 00:00:00') ),PARTITION p9 VALUES LESS THAN (MAXVALUE)
);
--timestamp不允许使用任何其他涉及值的表达式

基于时间间隔的分区方案，在mysql5.7中，可以基于范围或事件间隔实现分区方案，有两种选择

1、基于范围的分区，对于分区表达式，可以使用操作函数基于date、time、或者datatime列来返回一个整数值

CREATE TABLE members (firstname VARCHAR(25) NOT NULL,lastname VARCHAR(25) NOT NULL,username VARCHAR(16) NOT NULL,email VARCHAR(35),joined DATE NOT NULL
)
PARTITION BY RANGE( YEAR(joined) ) (PARTITION p0 VALUES LESS THAN (1960),PARTITION p1 VALUES LESS THAN (1970),PARTITION p2 VALUES LESS THAN (1980),PARTITION p3 VALUES LESS THAN (1990),PARTITION p4 VALUES LESS THAN MAXVALUE
);CREATE TABLE quarterly_report_status (report_id INT NOT NULL,report_status VARCHAR(20) NOT NULL,report_updated TIMESTAMP NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP
)
PARTITION BY RANGE ( UNIX_TIMESTAMP(report_updated) ) (PARTITION p0 VALUES LESS THAN ( UNIX_TIMESTAMP('2008-01-01 00:00:00') ),PARTITION p1 VALUES LESS THAN ( UNIX_TIMESTAMP('2008-04-01 00:00:00') ),PARTITION p2 VALUES LESS THAN ( UNIX_TIMESTAMP('2008-07-01 00:00:00') ),PARTITION p3 VALUES LESS THAN ( UNIX_TIMESTAMP('2008-10-01 00:00:00') ),PARTITION p4 VALUES LESS THAN ( UNIX_TIMESTAMP('2009-01-01 00:00:00') ),PARTITION p5 VALUES LESS THAN ( UNIX_TIMESTAMP('2009-04-01 00:00:00') ),PARTITION p6 VALUES LESS THAN ( UNIX_TIMESTAMP('2009-07-01 00:00:00') ),PARTITION p7 VALUES LESS THAN ( UNIX_TIMESTAMP('2009-10-01 00:00:00') ),PARTITION p8 VALUES LESS THAN ( UNIX_TIMESTAMP('2010-01-01 00:00:00') ),PARTITION p9 VALUES LESS THAN (MAXVALUE)
);

2、基于范围列的分区，使用date或者datatime列作为分区列

CREATE TABLE members (firstname VARCHAR(25) NOT NULL,lastname VARCHAR(25) NOT NULL,username VARCHAR(16) NOT NULL,email VARCHAR(35),joined DATE NOT NULL
)
PARTITION BY RANGE COLUMNS(joined) (PARTITION p0 VALUES LESS THAN ('1960-01-01'),PARTITION p1 VALUES LESS THAN ('1970-01-01'),PARTITION p2 VALUES LESS THAN ('1980-01-01'),PARTITION p3 VALUES LESS THAN ('1990-01-01'),PARTITION p4 VALUES LESS THAN MAXVALUE
);
列表分区
CREATE TABLE employees (id INT NOT NULL,fname VARCHAR(30),lname VARCHAR(30),hired DATE NOT NULL DEFAULT '1970-01-01',separated DATE NOT NULL DEFAULT '9999-12-31',job_code INT,store_id INT)PARTITION BY LIST(store_id) (PARTITION pNorth VALUES IN (3,5,6,9,17),PARTITION pEast VALUES IN (1,2,10,11,19,20),PARTITION pWest VALUES IN (4,12,13,14,18),PARTITION pCentral VALUES IN (7,8,15,16));
列分区
 CREATE TABLE `list_c` (`c1` int(11) DEFAULT NULL,`c2` int(11) DEFAULT NULL) ENGINE=InnoDB DEFAULT CHARSET=latin1/*!50500 PARTITION BY RANGE COLUMNS(c1)(PARTITION p0 VALUES LESS THAN (5) ENGINE = InnoDB,PARTITION p1 VALUES LESS THAN (10) ENGINE = InnoDB) */CREATE TABLE `list_c` (`c1` int(11) DEFAULT NULL,`c2` int(11) DEFAULT NULL,`c3` char(20) DEFAULT NULL) ENGINE=InnoDB DEFAULT CHARSET=latin1/*!50500 PARTITION BY RANGE COLUMNS(c1,c3)(PARTITION p0 VALUES LESS THAN (5,'aaa') ENGINE = InnoDB,PARTITION p1 VALUES LESS THAN (10,'bbb') ENGINE = InnoDB) */CREATE TABLE `list_c` (`c1` int(11) DEFAULT NULL,`c2` int(11) DEFAULT NULL,`c3` char(20) DEFAULT NULL) ENGINE=InnoDB DEFAULT CHARSET=latin1/*!50500 PARTITION BY LIST COLUMNS(c3)(PARTITION p0 VALUES IN ('aaa') ENGINE = InnoDB,PARTITION p1 VALUES IN ('bbb') ENGINE = InnoDB) */
hash分区
CREATE TABLE employees (id INT NOT NULL,fname VARCHAR(30),lname VARCHAR(30),hired DATE NOT NULL DEFAULT '1970-01-01',separated DATE NOT NULL DEFAULT '9999-12-31',job_code INT,store_id INT
)
PARTITION BY HASH(store_id)
PARTITIONS 4;CREATE TABLE employees (id INT NOT NULL,fname VARCHAR(30),lname VARCHAR(30),hired DATE NOT NULL DEFAULT '1970-01-01',separated DATE NOT NULL DEFAULT '9999-12-31',job_code INT,store_id INT
)
PARTITION BY LINEAR HASH(YEAR(hired))
PARTITIONS 4;
key分区
CREATE TABLE tk (col1 INT NOT NULL,col2 CHAR(5),col3 DATE
)
PARTITION BY LINEAR KEY (col1)
PARTITIONS 3;
子分区
CREATE TABLE `t_partition_by_subpart`
(`id` INT AUTO_INCREMENT,`sName` VARCHAR(10) NOT NULL,`sAge` INT(2) UNSIGNED ZEROFILL NOT NULL,`sAddr` VARCHAR(20) DEFAULT NULL,`sGrade` INT(2) NOT NULL,`sStuId` INT(8) DEFAULT NULL,`sSex` INT(1) UNSIGNED DEFAULT NULL,PRIMARY KEY (`id`, `sGrade`)
)  ENGINE = INNODB
PARTITION BY RANGE(id)
SUBPARTITION BY HASH(sGrade) SUBPARTITIONS 2
(
PARTITION p0 VALUES LESS THAN(5),
PARTITION p1 VALUES LESS THAN(10),
PARTITION p2 VALUES LESS THAN(15)
);

如何使用分区

如果需要从非常大的表中查询出某一段时间的记录，而这张表中包含很多年的历史数据，数据是按照时间排序的，此时应该如何查询数据呢？
因为数据量巨大，肯定不能在每次查询的时候都扫描全表。考虑到索引在空间和维护上的消耗，也不希望使用索引，即使使用索引，会发现会产生大量的碎片，还会产生大量的随机IO，但是当数据量超大的时候，索引也就无法起作用了，此时可以考虑使用分区来进行解决
在这里插入图片描述

使用简单的分区方式存放表，不要任何索引，根据分区规则大致定位需要的数据为止，通过使用where条件将需要的数据限制在少数分区中，这种策略适用于以正常的方式访问大量数据

如果数据有明显的热点，而且除了这部分数据，其他数据很少被访问到，那么可以将这部分热点数据单独放在一个分区中，让这个分区的数据能够有机会都缓存在内存中，这样查询就可以只访问一个很小的分区表，能够使用索引，也能够有效的使用缓存

使用分区表注意事项

在这里插入图片描述

上一篇：vue3 异步组件

下一篇：2.1.5操作系统之线程概念与多线程模型

相关内容

热门资讯

女儿出阁司仪主持词 女儿出阁司仪主持词范文　　主持词要把握好吸引观众、导入主题、创设情境等环节以吸引观众。在当下的中国社...
歌颂祖国串词 歌颂祖国串词一。各位领导 各位来宾，大家晚上好。今天我们这里篷壁生辉，喜气洋溢，是因为有您们的光临，...
小学生庆元旦联欢会主持词 小学生庆元旦联欢会主持词范文（精选5篇）　　主持词要注意活动对象，针对活动对象写相应的主持词。在现今...
新年升旗仪式致辞 新年升旗仪式致辞（精选14篇）　　在现实生活或工作学习中，说到致辞，大家肯定都不陌生吧，致辞具有思路...
表演半台词 表演三句半台词　　敲锣打鼓走圆场　　1：锣鼓一响好心情，　　2：我们漫游动画城；　　3：表演一个三句...
毕业30周年同学聚会主持词 毕业30周年同学聚会主持词范文　　老同学聚会，一桌饭菜，谈论着当年的同学情，好不快活呀，往日是多么的...
结训典礼主持词 结训典礼主持词范文　　主持词是主持人在节目进行过程中用于串联节目的串联词。在当今中国社会，各种集会中...
集团董事长新年的经典致辞 集团董事长新年的经典致辞（通用13篇）　　在平平淡淡的学习、工作、生活中，大家对致辞都不陌生吧，致辞...
郭德纲于谦相声《李菁表妹》台... 郭德纲于谦相声《李菁表妹》台词　　郭德纲，1973年1月18日出生于天津，华语相声演员，电视、电影演...
教师节学生主持稿 教师节学生主持稿　　教师“不仅仅是一份工作、一个职业，而是一项需要用一生的情感去拥抱的事业，更是一种...
主持词开场白夏天 主持词开场白夏天（精选5篇）　　在现实社会中，很多情况下我们都需要用到开场白，独具匠心的开场白，才能...
幼儿园家长会全过程主持词 幼儿园家长会全过程主持词　　主持词要把握好吸引观众、导入主题、创设情境等环节以吸引观众。在当今不断发...
播音主持岗位实践报告范文8篇 播音主持岗位实践报告范文 第一篇时间过的很快，转眼间，我到临沂银雀山汉墓竹筒博物馆工作，已经快一年的...
爱国活动主持词 爱国活动主持词范文　　主持人在台上表演的灵魂就表现在主持词中。我们眼下的社会，主持词在各种活动中起到...
“我的祖国”演讲比赛主持词 “我的祖国”演讲比赛主持词　　主持词要注意活动对象，针对活动对象写相应的主持词。在当下这个社会中，越...
舞蹈节目主持词串词 舞蹈节目主持词串词范文（精选8篇）　　主持词需要富有情感，充满热情，才能有效地吸引到观众。在当下的社...
我是歌手歌唱比赛主持词 我是歌手歌唱比赛主持词　　小歌手主持词篇一　　A：尊敬的各位领导　　B：敬爱的老师，亲爱的同学们　　...
中秋节联欢晚会主持词 中秋节联欢晚会主持词（精选11篇）　　主持词要注意活动对象，针对活动对象写相应的主持词。我们眼下的社...
初中新生开学欢迎词 初中新生开学欢迎词2017各位初一年全体同学石狮二中敞开胸怀迎接你们，真诚地欢迎你们加入这个大家庭，...
品鉴会主持词 品鉴会主持词　　借鉴诗词和散文诗是主持词的一种写作手法。随着中国在不断地进步，各种集会的节目都通过主...