加入收藏 | 设为首页 | 会员中心 | 我要投稿 厦门网 (https://www.xiamenwang.cn/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 编程 > 正文

详解MyCat 全局序列号实现方式,值得收藏

发布时间:2019-10-12 21:46:38 所属栏目:编程 来源:波波说运维
导读:在实现分库分表的情况下,数据库自增主键已无法保证自增主键的全局唯一。为此,MyCat 提供了全局sequence,并且提供了包含本地配置和数据库配置等多种实现方式。下面对这几种实现方式做一下介绍。 1. 本地文件方式 原理: 此方式 MyCAT 将 sequence 配置到

注意:MYCAT_SEQUENCE 表和以上的 3 个 function,需要放在同一个节点上。function 请直接在具体节点的数据库上执行,如果执行的时候报:

  1. you might want to use the less safe log_bin_trust_function_creators variable 

需要对数据库做如下设置:

  1. windows 下 my.ini[mysqld]加上 log_bin_trust_function_creators=1 
  2. linux 下/etc/my.cnf 下 my.ini[mysqld]加上 log_bin_trust_function_creators=1 

修改完后,即可在 mysql 数据库中执行上面的函数。

使用示例:

  1. insert into table1(id,name) values(next value for MYCATSEQ_GLOBAL,'test'); 

3. 本地时间戳方式

ID= 64 位二进制 (42(毫秒)+5(机器 ID)+5(业务编码)+12(重复累加)

换算成十进制为 18 位数的 long 类型,每毫秒可以并发 12 位二进制的累加。

使用方式:

a. 配置 server.xml

  1. <property name="sequnceHandlerType">2</property> 

b. 在 mycat 下配置:sequence_time_conf.properties

  1. WORKID=0-31 任意整数 
  2. DATAACENTERID=0-31 任意整数 

多个个 mycat 节点下每个 mycat 配置的 WORKID,DATAACENTERID 不同,组成唯一标识,总共支持32*32=1024 种组合。

4. 分布式 ZK ID 生成器

  1. <property name="sequnceHandlerType">3</property> 

Zk 的连接信息统一在 myid.properties 的 zkURL 属性中配置。

基于 ZK 与本地配置的分布式 ID 生成器(可以通过 ZK 获取集群(机房)唯一 InstanceID,也可以通过配置文件配置 InstanceID)

  1. ID 结构:long 64 位,ID 最大可占 63 位 
  2. * |current time millis(微秒时间戳 38 位,可以使用 17 年)|clusterId(机房或者 ZKid,通过配置文件配置 5位)|instanceId(实例 ID,可以通过 ZK 或者配置文件获取,5 位)|threadId(线程 ID,9 位)|increment(自增,6 位) 
  3. * 一共 63 位,可以承受单机房单机器单线程 1000*(2^6)=640000 的并发。 
  4. * 无悲观锁,无强竞争,吞吐量更高 

配置文件:sequence_distributed_conf.properties,只要配置里面:INSTANCEID=ZK 就是从 ZK 上获取InstanceID。

5. Zk 递增方式

  1. <property name="sequnceHandlerType">4</property> 

Zk 的连接信息统一在 myid.properties 的 zkURL 属性中配置,4 是 zookeeper 实现递增序列号

1) 配置文件:sequence_conf.properties, 只要配置好 ZK 地址和表名的如下属性

  • TABLE.MINID 某线程当前区间内最小值
  • TABLE.MAXID 某线程当前区间内最大值
  • TABLE.CURID 某线程当前区间内当前值

2) 文件配置的 MAXID 以及 MINID 决定每次取得区间,这个对于每个线程或者进程都有效

3)文件中的这三个属性配置只对第一个进程的第一个线程有效,其他线程和进程会动态读取 ZK

6. 自增长主键

(1) MyCAT 自增长主键和返回生成主键 ID 的实现

说明:

  • mysql 本身对非自增长主键,使用 last_insert_id()是不会返回结果的,只会返回 0;
  • mysql只 会对定义自增长主键,可以用last_insert_id() 返 回 主 键 值 ;

MyCAT目前提供了自增长主键功能,但是如果对应的 mysql 节点上数据表,没有定义 auto_increment,那么在 MyCAT 层调用 last_insert_id()也是不会返回结果的。

正确配置方式如下:

  • mysql 定义自增主键
    1. CREATE TABLE table1( 
    2.  'id_' INT(10) UNSIGNED NOT NULL AUTO_INCREMENT,  
    3.  'name_' INT(10) UNSIGNED NOT NULL, 
    4.  PRIMARY KEY ('id_') 
    5.  ) ENGINE=MYISAM AUTO_INCREMENT=6 DEFAULT CHARSET=utf8; 
  • mycat 定义主键自增
  • 详解MyCat 全局序列号实现方式,值得收藏

  • mycat 对应 sequence_db_conf.properties 增加相应设置
    1. TABLE1=dn1 
  • 在数据库中 mycat_sequence 表中增加 TABLE1 表的 sequence 记录

(编辑:厦门网)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!

热点阅读