MySQL分区介绍与使用
2022/8/26 2:23:09
本文主要是介绍MySQL分区介绍与使用,对大家解决编程问题具有一定的参考价值,需要的程序猿们随着小编来一起学习吧!
一、MySQL分区创建
MySQL创建方式一共有四种:range、list、hash和key。
1.range(官方文档)
1.1 int
create table staff( id int(32) not null, code_ varchar(30), fname varchar(30), time_ date, primary key(`id`,`time_`) ) partition by range(id)( partition p0 values less than (5), partition p1 values less than (10), partition p2 values less than (15), partition p3 values less than (MAXVALUE) )
MAXVALUE:始终大于最大可能整数值的整数值。
1.2 DATE、TIME和DATETIME
使用一个对DATE、TIME或DATETIME列进行操作的函数,并返回一个整数值。
create table staff( id int(32) not null, code_ varchar(30), fname varchar(30), time_ date, PRIMARY key(`id`,`time_`) ) partition by range(year(time_))( partition p0 VALUES less than (202201), partition p1 VALUES less than (202301), partition p2 VALUES less than (202401), partition p3 VALUES less than MAXVALUE )
1.3 TIMESTAMP
在MySQL8.0中,也可以使用UNIX TIMESTAMP()函数根据TIMESTAMP列的值对表进行RANGE分区。
CREATE TABLE quarterly_report_status ( report_id INT NOT NULL, report_status VARCHAR(20) NOT NULL, report_updated TIMESTAMP NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP ) PARTITION BY RANGE ( UNIX_TIMESTAMP(report_updated) ) ( PARTITION p0 VALUES LESS THAN ( UNIX_TIMESTAMP('2008-01-01 00:00:00') ), PARTITION p1 VALUES LESS THAN ( UNIX_TIMESTAMP('2008-04-01 00:00:00') ), PARTITION p2 VALUES LESS THAN ( UNIX_TIMESTAMP('2008-07-01 00:00:00') ), PARTITION p3 VALUES LESS THAN ( UNIX_TIMESTAMP('2008-10-01 00:00:00') ), PARTITION p4 VALUES LESS THAN ( UNIX_TIMESTAMP('2009-01-01 00:00:00') ), PARTITION p5 VALUES LESS THAN ( UNIX_TIMESTAMP('2010-01-01 00:00:00') ), PARTITION p6 VALUES LESS THAN (MAXVALUE) );
1.4 非int
COLUMNS关键字可定义非integer范围及多列范围,不过需要注意COLUMNS括号内只能是列名,不支持函数;多列范围时,多列范围必须呈递增趋势:
-- 单列 create table staff( id int(32) not null, code_ varchar(30), fname varchar(30), time_ varchar(30), PRIMARY key(`id`,`time_`) ) partition by range columns(time_)( partition p0 VALUES less than ('202201'), partition p1 VALUES less than ('202301'), partition p2 VALUES less than ('202401'), partition p3 VALUES less than MAXVALUE ) --多列 create table stafft( one varchar(30), two varchar(30) ) partition by range columns(one,two)( partition p0 values less than ('0','10'), partition p1 values less than ('10','20'), partition p2 values less than ('20','30'), partition p3 values less than (maxvalue,maxvalue) )
2.List(官方文档)
2.1 int
LIST分区通过使用“PARTITION BY LIST(expr)”来实现,其中“expr”是某列值或一个基于某个列值、并返回一个整数值的表达式,然后通过“VALUES IN (value_list)”的方式来定义每个分区,其中“value_list”是一个通过逗号分隔的整数列表。
假定有20个店铺,分布在4个有经销权的地区,如下表所示:
地区 | 店铺编号 |
---|---|
北区 | 3, 5, 6, 9, 17 |
东区 | 1, 2, 10, 11, 19, 20 |
西区 | 4, 12, 13, 14, 18 |
中心区 | 7, 8, 15, 16 |
CREATE TABLE employees ( id INT NOT NULL, fname VARCHAR(30), lname VARCHAR(30), hired DATE NOT NULL DEFAULT '1970-01-01', separated DATE NOT NULL DEFAULT '9999-12-31', job_code INT, store_id INT ) PARTITION BY LIST(store_id) ( PARTITION pNorth VALUES IN (3,5,6,9,17), PARTITION pEast VALUES IN (1,2,10,11,19,20), PARTITION pWest VALUES IN (4,12,13,14,18), PARTITION pCentral VALUES IN (7,8,15,16) );
2.2 非int
与Range相同,添加COLUMNS关键字可支持非整数和多列。
如果试图插入列值(或分区表达式的返回值)不在分区值列表中的一行时,那么“INSERT”查询将失败并报错。
当插入多条数据出错时,如果表的引擎支持事务(Innodb),则不会插入任何数据;如果不支持事务,则出错前的数据会插入,后面的不会执行。
3.HASH(官方文档)
3.1 HASH
Hash分区主要用来确保数据在预先确定数目的分区中平均分布,Hash括号内只能是整数列或返回确定整数的函数。
Hash分区通过使用“PARTITION BY HASH(expr)”来实现,其中“expr”是一个返回整数的表达式。也可以是一个列名,但是类型必须是MySQL的整数类型之一。使用PARTITIONS num设置分区个数,如不设置默认为1,其中num是一个非负的整数。
create table staff( id int(32) not null, code_ varchar(30), fname varchar(30), time_ varchar(30), PRIMARY key(`id`,`time_`) ) partition by hash(id) partitions 3;
3.2 LINEAR HASH(官方文档)
与常规哈希的区别在于,线性哈希功能使用的一个线性的2的幂(powers-of-two)运算法则,而常规哈希使用的是求哈希函数值的模数。但是会有热点区的问题,因为线性哈希给每个区分配的会不均匀,分配到较多的内容时,其访问量就会较多,从而成为热点区。
create table staff( id int(32) not null, code_ varchar(30), fname varchar(30), time_ varchar(30), PRIMARY key(`id`,`time_`) ) partition by linear hash(id) partitions 3;
4.KEY(官方文档)
4.1 KEY
Key分区与Hash分区很相似,Key调用自己内部的Hash函数,定义时把Hash关键字替换成Key即可,同样Key分区也有对应与线性Hash的线性Key分区方法。Key不局限于整数类型。
当表存在主键或唯一索引时可省略Key括号内的列名,Mysql将按照主键-唯一索引的顺序选择,当找不到唯一索引时报错(MySQL 8.0)。
create table staff( id int(32) not null, code_ varchar(30), fname varchar(30), time_ varchar(30), PRIMARY key(`id`,`time_`) ) partition by key(time_) partitions 3;
4.2 LINEAR KEY
影响与Linear Hash一样,请参考上文中的Linear Hash。
create table staff( id int(32) not null, code_ varchar(30), fname varchar(30), time_ varchar(30), PRIMARY key(`id`,`time_`) ) partition by linear key(id) partitions 3;
二、MySQL分区操作
1. 添加分区
1.1 在最后追加分区
ALTER TABLE staff ADD PARTITION (PARTITION p4 VALUES LESS THAN (12));
当已有分区最后是MAXVALUE的时候不可用。报错:1481 - MAXVALUE can only be used in last partition definition
1.2 创建表之后修改分区
表已有数据,这种做法,运行时间会比较长。建议新建表然后导入数据。修改分区会覆盖之前建立的分区。
alter table staff partition by range(id) ( partition p0 values less than (5), partition p1 values less than (10), partition p2 values less than (15), partition p3 values less than (MAXVALUE) );
1.3 分区
create table staff( id int(32) not null, code_ varchar(30), fname varchar(30), time_ varchar(20), primary key(`id`,`time_`) ) partition by range(id)( partition p0 values less than (5), partition p1 values less than (10), partition p2 values less than (15), partition p3 values less than (MAXVALUE) ) -- p2分为p4和p2 alter table staff reorganize partition p2 into ( partition p4 values less than (12), partition p2 values less than (15) )
2.删除分区
2.1 drop
删除分区的同时也会该分区内的删除数据。
alter table staff drop partition p0;
3.合并分区
常规HASH和线性HASH的增加收缩分区的原理是一样的。增加和收缩分区后原来的数据会根据现有的分区数量重新分布。HASH分区不能删除分区,所以不能使用DROP PARTITION操作进行分区删除操作;
通过ALTER TABLE … COALESCE PARTITION num来合并分区,这里的num是减去的分区数量;
通过ALTER TABLE … ADD PARTITION PARTITIONS num来增加分区,这里是num是在原先基础上再增加的分区数量。
3.1 合并分区
减少分区后数据会根据现有的分区进行重新分配。
alter table staff coalesce partition 3;
3.2 增加分区
增加分区之后数据会相应进行调整。
alter table tblinhash add partition partitions 4;
3.3 移除分区
移除分区的定义不会删除数据(所有分区移除)。
alter table staff remove partitioning
4.查询分区信息
4.1 查询分区表中各个分区的数据量
select partition_name,table_rows from information_schema.partitions where table_name='staff'
4.2 查询某个分区信息
select * from staff partition(p1)
4.3 查询的时候使用到分区
如果查询是基于分区表的话,会显示查询将访问的分区。在5.7以前的版本中,想要显示partitions需要使用explain partitions命令;想要显示filtered需要使用explain extended命令。在5.7版本后,默认explain直接显示partitions和filtered中的信息。
explain select * from staff where id = 6
普通表一个.frm和一个.idb 而分区表一个.frm和多个.idb文件
.frm:表结构的文件
.ibd:表数据和索引的文件。该表的索引(B+树)的每个非叶子节点存储索引,叶子节点存储索引和索引对应的数据。
附录:
- 分区字段必须是主键
报错:1503 - A PRIMARY KEY must include all columns in the table's partitioning function (prefixed columns are not considered).
- 分区字段,必须以分区字段进行查询,否则分区失效
- 一张表最多只能有1024个分区。
- 查询条件不是分区建立的条件,会走所有分区。
这篇关于MySQL分区介绍与使用的文章就介绍到这儿,希望我们推荐的文章对大家有所帮助,也希望大家多多支持为之网!
- 2024-11-16MySQL资料:新手入门教程
- 2024-11-16MySQL资料:新手入门教程
- 2024-11-15MySQL教程:初学者必备的MySQL数据库入门指南
- 2024-11-15MySQL教程:初学者必看的MySQL入门指南
- 2024-11-04部署MySQL集群项目实战:新手入门教程
- 2024-11-04如何部署MySQL集群资料:新手入门指南
- 2024-11-02MySQL集群项目实战:新手入门指南
- 2024-11-02初学者指南:部署MySQL集群资料
- 2024-11-01部署MySQL集群教程:新手入门指南
- 2024-11-01如何部署MySQL集群:新手入门教程