• 欢迎访问搞代码网站,推荐使用最新版火狐浏览器和Chrome浏览器访问本网站!
  • 如果您觉得本站非常有看点,那么赶紧使用Ctrl+D 收藏搞代码吧

MySQL分区技术(一)_MySQL

mysql 搞代码 4年前 (2022-01-09) 9次浏览 已收录 0个评论

4:MySQL 分区技术(是mysql 5.1以版本后开始用->是甲骨文mysql技术团队维护人员以插件形式插入到mysql里面的技术)

目前,针对海量数据的优化主要有2中方法:

1:大表拆成小表的方式(物理上)

一:垂直分表->一张垂直切成几张

二:水平分表(一般重点)->横切,意思就是一张表有100个数据横切10张表,一张表存10条(字段一致)

2:SQL语句的优化(可以通过增加索引等来调整,但是数据量大的增大会导致索引的维护代价增大)

水平分区技术将一个表拆成多个表,比较常用的方式是将表中的记录按照某种hash算法进行拆分,简单的拆分方法如取摸

方式。同样,这种分区方法也必须对前端的应用程序中的SQL进行修改方可以使用。而且对于一个SQL,它可能会修改两个

表,那么你必须地写出2个SQL语句从而可以完成一个逻辑事务,使得程序的判断逻辑越来越复杂,这样也导致程序的维护代价

高,也就失去了采用数据库的优势。

*因此:分区技术可以有力地避免如上的弊端,成为解决海量数据存储的有力方法。

分区技术:

->>有效解决了:物理上拆分多个表,逻辑上操作一个表表明不变

->>MySQL分区技术介绍(*主要用的是range 和 list 分区*):

—–分区在逻辑上是一张表,在硬件/物理上是多张表,就是拆分表索引和数据—–

MySQL的分区技术不同与之前的分表技术,它与水平分表有点类似,但是它在逻辑层进行的水平分表,

对与应用程序而言它还是一张表,

MySQL5.1版本后有4中分区类型:

一:RANGE分区(用的最多):基于属于一个给定连续区间的列值(字段),把多行分配给分区 –>基于女字段为参考点来进行分区

–将一个表拆分成:索引文件,数据文件分片存储

二:LIST分区:类似于按range分区,区别在于list分区是基于列值匹配一个离散值集合中的某个值来进行选择(列里面的值是固定值时候来进行分区,而且是枚举类型的值适合用list分区 –>比如说 性别:男,女)

三:HASH分区:基于用户定义的表达式的返回值来进行选择的分区,改表达式使用将要插入到表中的这些行的列值计算,这个函数可以包含MySQL中有效的、产生负整数值的任何表达式

—>把每次插入的数据随机的平均的分配到多个分区里面,最终多个分区里面的数据时平均分配的,但是每个分区里面的数值肯能不太一样,因为是随机分配的(一般可以用来做MySQL分区的测试来使用)

四:KEY分区:类似于按hash分区,区别在于key分区只支持计算一列或多列,且MySQL服务器提供其自身的哈希函数

测试一下(测试用hash类型的):->myisam增删改查的速度快
create table t2(id int)engine=myisam
partition by hash(id)
partitions 5; ->能后当你插入数据的时候就会随机分配插入个个分区中
建立一个存储
\d // ->修改结束符号 之前是;号改成 //
create procedure p5()
begin
set @i=1;
while @i<100000 do
insert into t4 values(@i);
set @i=@i+1;
end while;
end //

执行刚才建立的存储
call p3() ->表p3就插入了9999条数据

innodb的数据结构:

分为:共享表空间及其独占表空间

一:innodb表结构共享表空间不能做成分区表:

所有文件的数据和索引都在ibddata1(比如你建了2个表会对应生成frm文件,但是2个表的所有数据和索引全部在这个文件里面共用,所有不能对表做正真的分区,初始值是10M)

原因:数据和索引全都是放在一个文件里面 .ibddata1文件

二:innodb表结构要想做出分区表必须是“独占表空间”

原因:数据和索引全都是独立的一个文件

开启独占空间:(*必须配置文件中开启文件才能做出独占表空间,才能做成分区表*)
innodb_data_home_dir = C:\mysql\data\
innodb_data_file_path = ibdata1:10M:autoextend
innodb_log_group_home_dir = C:\mysql\data\
innodb_file_per_table=1 ->配置文件中innodb下方加上
重启:MySQL –>pkill mysqld 关闭进程 重新启动MySQL-bin/mysqld_safe –user=mysql &

测试:
create table t4(id int)engine=innodb
partition by RANGE(id)(
partition p0 values less t本文来源gaodai$ma#com搞$代*码*网han(10000),
partition p1 values less than(20000),
PARTITION p2 VALUES less than MAXVALUE);

能后你在创建innodb类型的数据表后,你会发现建一个x表就有x.frm x.ibd文件,就不会和其他表放到一起从而做表分区

*重点总结:只有把innodb设置成独立的表空间后,才能创建innodb表引擎的表分区

相关命令:
/s; 查看详细信息版本啊编码啊 什么的。。。
show engines; 查看默认表引擎
show plugins; 查看当前MySQL的所有插件,可以查看是否支持分区partition
show index from from tabName; 查看索引
show procedure status; 查看简历的存储


搞代码网(gaodaima.com)提供的所有资源部分来自互联网,如果有侵犯您的版权或其他权益,请说明详细缘由并提供版权或权益证明然后发送到邮箱[email protected],我们会在看到邮件的第一时间内为您处理,或直接联系QQ:872152909。本网站采用BY-NC-SA协议进行授权
转载请注明原文链接:MySQL分区技术(一)_MySQL

喜欢 (0)
[搞代码]
分享 (0)
发表我的评论
取消评论

表情 贴图 加粗 删除线 居中 斜体 签到

Hi,您需要填写昵称和邮箱!

  • 昵称 (必填)
  • 邮箱 (必填)
  • 网址