• 分布式ID生成器-rain


    项目地址:https://github.com/mxsm/rain 欢迎关注

    rain

    分布式全局ID生成服务,ID生成分为两个模式:

    • segment(分段模式)
    • snowflake(雪花算法)

    如何使用看如下介绍。

    Quick Start

    1. 安装依赖

    • JDK 11
    • MySQL8
    • Maven 3.8.5

    安装好相关的依赖。

    2. 数据库初始化

    2.1 创建表

    运行一下sql脚本创建对应的数据库和表,脚本如下:

    DROP DATABASE IF EXISTS `uidgenerator`;
    CREATE DATABASE `uidgenerator` ;
    use `uidgenerator`;
    
    DROP TABLE IF EXISTS mxsm_allocation;
    CREATE TABLE `mxsm_allocation` (
     `id` bigint NOT NULL AUTO_INCREMENT COMMENT '主键ID',
     `biz_code` varchar(128) COLLATE utf8mb4_general_ci NOT NULL COMMENT '业务编码(用户ID,使用业务方编码)',
     `max_id` bigint NOT NULL DEFAULT '1' COMMENT '最大值',
     `step` int NOT NULL COMMENT '步长',
     `description` varchar(255) COLLATE utf8mb4_general_ci DEFAULT '' COMMENT '说明',
     `create_time` timestamp NOT NULL COMMENT '创建时间',
     `update_time` timestamp NOT NULL ON UPDATE CURRENT_TIMESTAMP COMMENT '更新时间',
     PRIMARY KEY (`id`),
     UNIQUE KEY `biz_code_index` (`biz_code`) USING BTREE
    ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_general_ci;
    
    DROP TABLE IF EXISTS mxsm_snowfalke_node;
    CREATE TABLE `mxsm_snowfalke_node` (
     `id` bigint NOT NULL AUTO_INCREMENT COMMENT '主键ID',
     `host_name` bigint NOT NULL COMMENT 'IP地址',
     `port` int NOT NULL DEFAULT '1' COMMENT '端口',
     `deploy_env_type` enum('ACTUAL','CONTAINER') COLLATE utf8mb4_general_ci DEFAULT 'ACTUAL' COMMENT '部署环境类型',
     `description` varchar(255) COLLATE utf8mb4_general_ci DEFAULT '' COMMENT '说明',
     `create_time` timestamp NOT NULL COMMENT '创建时间',
     `update_time` timestamp NOT NULL ON UPDATE CURRENT_TIMESTAMP COMMENT '更新时间',
     PRIMARY KEY (`id`),
     UNIQUE KEY `mix_index` (`host_name`,`port`) USING BTREE
    ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_general_ci;
    
    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7
    • 8
    • 9
    • 10
    • 11
    • 12
    • 13
    • 14
    • 15
    • 16
    • 17
    • 18
    • 19
    • 20
    • 21
    • 22
    • 23
    • 24
    • 25
    • 26
    • 27
    • 28
    • 29

    3. rain部署启动

    3.1 通过提供的Package

    第一步:下载 binary package

    可以从最新的最新的稳定版本页面下载。获取 rain-server-1.0.1-SNAPSHOT.tar.gz

    tar -zxvf rain-server-1.0.1-SNAPSHOT.tar.gz
    cd rain-server-1.0.1-SNAPSHOT/
    
    • 1
    • 2

    第二步:修改conf/application.properties

    修改application.properties配置中数据库相关配置:

    spring.datasource.url=jdbc:mysql://ip:port/uidgenerator?useUnicode=true&characterEncoding=utf-8
    spring.datasource.username=xxx
    spring.datasource.password=xxxxx
    
    • 1
    • 2
    • 3

    Tips: 确保库地址, 名称, 端口号, 用户名和密码正确

    第三步:启动服务

    sh bin/start.sh
    
    • 1

    [外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-8Hdkio4p-1656152000742)(https://raw.githubusercontent.com/mxsm/picture/main/blog/javase/jvmimage-20220604145105893.png)]

    4. Segment模式UID生成配置

    修改配置conf/application.properties文件,以下是配置说明

    配置默认值说明
    mxsm.uid.segment.threshold40缓存模式下当本地缓存阈值低于或者等于40%后就会去数据库加载segment填充,取值范围0-100
    mxsm.uid.segment.cache-size16缓存模式下默认加载的缓存segment的数量

    threshold和cache-size的大小影响从数据中获取的segment的频率,cache-size如果设置的过大在停机维护项目的时候会造成UID的浪费,但是cache-size大可以在数据库发生宕机的情况下能够继续服务之前已经加载内存中的bizCode。

    5. Snowflake模式UID生成配置

    修改配置conf/application.properties文件,以下是配置说明:

    配置默认值说明
    mxsm.uid.snowflake.timestamp-bits41雪花算法timestamp的位数
    mxsm.uid.snowflake.machine-id-bits10雪花算法machine id的位数
    mxsm.uid.snowflake.sequence-bits12雪花算法序列号的位数
    mxsm.uid.snowflake.containerfalse是否为容器化部署
    mxsm.uid.snowflake.time-bits-secondfalsetimestamp是否为秒
    mxsm.uid.snowflake.epoch2022-05-01timestamp的相对时间,格式yyyy-MM-dd,并且在当前时间以前

    timestamp-bits、machine-id-bits、sequence-bits三个位数和加起来要等于63。

    6. Java SDK

    maven client依赖:

    <dependency>
      <groupId>com.github.mxsm</groupId>
      <artifactId>rain-uidgenerator-client</artifactId>
      <version>${latest version}</version>
    </dependency>
    
    • 1
    • 2
    • 3
    • 4
    • 5

    使用例子

    UidClient client = UidClient.builder()
                .setUidGeneratorServerUir("http://172.29.250.21:8080") //设置服务地址
                .setSegmentNum(10) //设置获取的segment数量
                .setThreshold(20) //设置阈值
                .isSegmentUidFromRemote(false) //设置是否直接从服务器通过Restful接口的方式获取
                .build();
    long uid = client.getSegmentUid("mxsm");
    long uidRemote = client.getSegmentUid("mxsm", true);
    long snowflake =  client.getSnowflakeUid();
    
    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7
    • 8
    • 9

    Source Code Quick Start

    第一步: clone代码

    git clone https://github.com/mxsm/rain.git
    cd rain
    
    • 1
    • 2

    第二步:修改rain-uidgenerator-server项目中的application.properties

    spring.datasource.url=jdbc:mysql://ip:port/uidgenerator?useUnicode=true&characterEncoding=utf-8
    spring.datasource.username=xxx
    spring.datasource.password=xxxxx
    
    • 1
    • 2
    • 3

    第三步:maven打包服务

    mvn clean package -DskipTests=true
    
    • 1

    第四步:启动服务

    java -Xms1g -Xmx1g -jar ./rain-uidgenerator-server/target/rain-uidgenerator-server-1.0.1-SNAPSHOT.jar
    
    • 1

    我是蚂蚁背大象,文章对你有帮助点赞关注我,文章有不正确的地方请您斧正留言评论~谢谢

  • 相关阅读:
    RPC 技术及其框架 Sekiro 在爬虫逆向中的应用,加密数据一把梭!
    力扣第24题 两两交换链表中的节点 c++精讲 。
    VueX简单又详细的解读,看了就会用
    计算机视觉: 基于隐式BRDF自编码器的文生三维技术
    Zookeeper实战、选举原理、分布式锁原理
    C++流插入和流提取的重载!
    前端常用的几种布局方式(易懂版)
    解决warning: this statement may fall through [-Wimplicit-fallthrough=]
    React中的Hooks--useReducer()
    01 | 如何管理项目
  • 原文地址:https://blog.csdn.net/ljbmxsm/article/details/125462606