Mycat 设置全局序列号

标签: mycat 序列 | 发表时间:2016-03-21 12:40 | 作者:冷静
出处:http://www.iteye.com

全局序列号介绍

在实现分库分表的情况下,数据库自增主键已无法保证自增主键的全局唯一。为此,MyCat 提供了全局sequence,并且提供了包含本地配置和数据库配置等多种实现方式。

 

本地文件方式

原理:此方式MyCAT将sequence配置到文件中,当使用到sequence中的配置后,MyCAT会更下classpath中的sequence_conf.properties文件中sequence当前的值。

配置方式:

在sequence_conf.properties文件中做如下配置:

GLOBAL_SEQ.HISIDS=

GLOBAL_SEQ.MINID=1001

GLOBAL_SEQ.MAXID=1000000000

GLOBAL_SEQ.CURID=1000

其中HISIDS表示使用过的历史分段(一般无特殊需要可不配置),MINID表示最小ID值,MAXID表示最大ID值,CURID表示当前ID值。

server.xml中配置:

1
< property  name = "sequnceHandlerType" >0</ property >

注:sequnceHandlerType需要配置为0,表示使用本地文件方式。 1表示数据库方式

使用示例:

1
insert  into  table1(id, name values ( next  value  for  MYCATSEQ_GLOBAL,‘test’);

缺点:当MyCAT重新发布后,配置文件中的sequence会恢复到初始值。

优点:本地加载,读取速度较快。

 

数据库方式

原理:在数据库中建立一张表,存放sequence名称(name),sequence当前值(current_value),步长(increment int类型每次读取多少个sequence,假设为K)等信息;

Sequence获取步骤:

1).当初次使用该sequence时,根据传入的sequence名称,从数据库这张表中读取current_value,和increment到MyCat中,并将数据库中的current_value设置为原current_value值+increment值;

2).MyCat将读取到current_value+increment作为本次要使用的sequence值,下次使用时,自动加1,当使用increment次后,执行步骤1)相同的操作.

MyCat负责维护这张表,用到哪些sequence,只需要在这张表中插入一条记录即可。若某次读取的sequence没有用完,系统就停掉了,则这次读取的sequence剩余值不会再使用。

配置方式:

server.xml配置:

1
< property  name = "sequnceHandlerType" >1</ property >

注:sequnceHandlerType 需要配置为1,表示使用数据库方式生成sequence.

数据库配置:

1) 创建MYCAT_SEQUENCE表

– 创建存放sequence的表

DROP TABLE IF EXISTS MYCAT_SEQUENCE;

– name sequence名称

– current_value 当前value

– increment 增长步长! 可理解为mycat在数据库中一次读取多少个sequence. 当这些用完后, 下次再从数据库中读取.

1
2
3
4
5
6
CREATE  TABLE  MYCAT_SEQUENCE (
NAME  VARCHAR  (50)  NOT  NULL ,
current_value  INT  NOT  NULL ,
increment  INT  NOT  NULL  DEFAULT  100,
PRIMARY  KEY  ( NAME )
) ENGINE = INNODB;

– 插入一条sequence

1
INSERT  INTO  MYCAT_SEQUENCE( name ,current_value,increment)  VALUES  (‘ GLOBAL ’, 100000, 100);

2) 创建相关function

 

– 获取当前sequence的值 (返回当前值,增量)

 

1
2
3
4
5
6
7
8
9
10
11
12
13
14
DROP  FUNCTION  IF EXISTS `mycat_seq_currval`;
DELIMITER ;;
CREATE  DEFINER=`root`@`%`  FUNCTION  `mycat_seq_currval`(seq_name  VARCHAR (50)) 
RETURNS  varchar (64) CHARSET latin1
     DETERMINISTIC
BEGIN 
         DECLARE  retval  VARCHAR (64);
         SET  retval= "-999999999,null" ;  
         SELECT  concat( CAST (current_value  AS  CHAR ), "," , CAST (increment  AS  CHAR ) )  INTO  retval 
           FROM  MYCAT_SEQUENCE   WHERE  name  = seq_name;  
         RETURN  retval ; 
END
;;
DELIMITER ;

 

– 设置sequence值

1
2
3
4
5
6
7
8
9
10
11
12
13
DROP  FUNCTION  IF EXISTS `mycat_seq_nextval`;
DELIMITER ;;
CREATE  DEFINER=`root`@`%`  FUNCTION  `mycat_seq_nextval`(seq_name  VARCHAR (50))  RETURNS  varchar (64)
  CHARSET latin1
     DETERMINISTIC
BEGIN 
          UPDATE  MYCAT_SEQUENCE  
                  SET  current_value = current_value + increment 
                   WHERE  name  = seq_name;  
          RETURN  mycat_seq_currval(seq_name);  
END
;;
DELIMITER ;

– 获取下一个sequence值

 

1
2
3
4
5
6
7
8
9
10
11
12
13
DROP  FUNCTION  IF EXISTS `mycat_seq_setval`;
DELIMITER ;;
CREATE  DEFINER=`root`@`%`  FUNCTION  `mycat_seq_setval`(seq_name  VARCHAR (50), value  INTEGER
RETURNS  varchar (64) CHARSET latin1
     DETERMINISTIC
BEGIN 
          UPDATE  MYCAT_SEQUENCE  
                    SET  current_value = value  
                    WHERE  name  = seq_name;  
          RETURN  mycat_seq_currval(seq_name);  
END
;;
DELIMITER ;

3) sequence_db_conf.properties相关配置,指定sequence相关配置在哪个节点上:

例如:

USER_SEQ=test_dn1

注意:MYCAT_SEQUENCE表和以上的3个function,需要放在同一个节点上。function请直接在具体节点的数据库上执行,如果执行的时候报:

you might want to use the less safe log_bin_trust_function_creators variable

需要对数据库做如下设置:

windows下my.ini[mysqld]加上log_bin_trust_function_creators=1

linux下/etc/my.cnf下my.ini[mysqld]加上log_bin_trust_function_creators=1

修改完后,即可在mysql数据库中执行上面的函数.

使用示例:

1
insert  into  table1(id, name values ( next  value  for  MYCATSEQ_GLOBAL,‘test’);

 

本文摘自:《Mycat权威指南》



已有 0 人发表留言,猛击->> 这里<<-参与讨论


ITeye推荐



相关 [mycat 序列] 推荐:

Mycat 设置全局序列号

- - 数据库 - ITeye博客
在实现分库分表的情况下,数据库自增主键已无法保证自增主键的全局唯一. 为此,MyCat 提供了全局sequence,并且提供了包含本地配置和数据库配置等多种实现方式. 原理:此方式MyCAT将sequence配置到文件中,当使用到sequence中的配置后,MyCAT会更下classpath中的sequence_conf.properties文件中sequence当前的值.

MyCat集群部署(HAProxy + MyCat)

- - 行业应用 - ITeye博客
参考实战视频: http://www.roncoo.com/course/view/85d6008fe77c4199b0cdd2885eaeee53. 《高可用架构篇--第13节--MySQL源码编译安装(CentOS-6.6+MySQL-5.6)》. 《高可用架构篇--第14节--MySQL主从复制的配置(CentOS-6.6+MySQL-5.6)》.

Mycat 入门

- - 数据库 - ITeye博客
MyCAT是mysql中间件,前身是阿里大名鼎鼎的Cobar,Cobar在开源了一段时间后,不了了之. 于是MyCAT扛起了这面大旗,在大数据时代,其重要性愈发彰显. 这篇文章主要是MyCAT的入门部署. 因Mycat是用java开发的,所以需要在实验环境下安装java,官方建议jdk1.7及以上版本.

Mycat之——Mycat集群部署(基于HAProxy + Mycat)

- - CSDN博客推荐文章
转载请注明出处:http://blog.csdn.net/l1028386804/article/details/75331934. 操作系统:CentOS-6.5-x86_64. JDK版本:jdk1.7.0_80. HAProxy版本:haproxy-1.5.19.tar.gz. Mycat版本:Mycat-server-1.5.1-RELEASE-20170717215510-linux.tar.gz (自行下载源码编译).

mycat 数据库中间件

- - Oracle - 数据库 - ITeye博客
出处:http://blog.csdn.net/nxw_tsp/article/details/56277430. 实习的时候,在一个项目当中,项目经理要求把原先的MySQL数据连接基于mycat来进行改造. 当时就在想MyCat是什么东西. MyCat是一个开源的分布式数据库系统,是一个实现了MySQL协议的服务器,前端用户可以把它看作是一个数据库代理,用MySQL客户端工具和命令行访问,而其后端可以用MySQL原生协议与多个MySQL服务器通信,也可以用JDBC协议与大多数主流数据库服务器通信,其核心功能是分表分库,即将一个大表水平分割为N个小表,存储在后端MySQL服务器里或者其他数据库里.

MySQL分布式中间件:MyCAT

- - 标点符
随着传统的数据库技术日趋成熟、计算机网络技术的飞速发展和应用范围的扩充,数据库应用已经普遍建立于计算机网络之上. 这时集中式数据库系统表现出它的不足:. 集中式处理,势必造成性能瓶颈;. 应用程序集中在一台计算机上运行,一旦该计算机发生故障,则整个系统受到影响,可靠性不高;. 集中式处理引起系统的规模和配置都不够灵活,系统的可扩充性差.

【Mycat 1.6 之路由与分发流程】

- - ITeye博客
一、Mycat 的路由与分发流程. 从原理上来看,可以把 mycat 看成一个 sql 转发器. mycat 接收到前端发来的 sql,然后转发到后台的 mysql 服务器上去执行. 但是后面有很多台 mysql 节点(如 dn1,dn2,dn3),该转发到哪些节点呢. 路由能保证 sql 转发到正确的节点.

数据库垂直拆分,水平拆分利器,cobar升级版mycat

- - CSDN博客推荐文章
基于阿里的开源cobar ,可以用于生产系统中,目前在做如下的一些改进:. 非阻塞IO的实现,相对于目前的cobar,并发性能大大提升,而且不会陷入假死状态. 优化线程池的分配,目前cobar的线程池分配效率不高. 修复cobar一些BUG. 参考impala中的impala front部分的Java代码,实现高效的Map-Reduce,能够处理上亿的大数据量.

(反)序列化

- - Java - 编程语言 - ITeye博客
本章关注对象序列化API,它提供了一个框架,用来将对象编码成字节流,并从字节流中重新构建对象. “将对象编码成字节流”被称作对象序列化,相反的处理过程被称作反序列化. 序列化技术为远程通信提供了标准的线路级对象表示法,也为JavaBeans组件结构提供了标准的持久化数据格式. 第七十四条:谨慎地实现Serializable接口.

java序列化java.io.Externalizable

- - Java - 编程语言 - ITeye博客
这次我们讲的是控制对象的序列化和反序列化. 控制序列化就是有选择的序列化对象,而不是把对象的所以内容都序列化,前篇我们的例子中介绍了transit变量和类变量(static)不被序列化,现在我们还有一种更为灵活的控制对象序列化和反序列方法,可以在序列化过程中储存其他非this对象包含的数据. 我们现在再来介绍一个接口 java.io.Externalizable.