• xxl-job 数据库由mysql替换为postgre


    背景

    项目中决定使用xxl-job 来实现任务的调度,决定采用开源的xxl-job。XXL-JOB是一个分布式任务调度平台,其核心设计目标是开发迅速、学习简单、轻量级、易扩展。现已开放源代码并接入多家公司线上产品线,开箱即用。

     xxl-job官网地址:分布式任务调度平台XXL-JOB

    虽然xxl-job代码是开源的且Dao层使用mybatis进行jdbc代理,但是他是基于mysql数据库开发的,mapper文件中存在mysql的特有函数和分页方言。我们的项目使用的信创数据库Postgre,需要基于源码做一些代码改动适配。

    项目改动点

    1 数据库驱动替换

    xxl-job-admin项目中的pom 文件添加postgre的坐标

    1. <dependency>
    2. <groupId>org.postgresqlgroupId>
    3. <artifactId>postgresqlartifactId>
    4. <scope>runtimescope>
    5. dependency>

    2 jdbc连接信息替换

    xxl-job-admin项目中的application.properties文件中的jdbc 连接信息由mysql 改为 postgre

    1. ### xxl-job, datasource
    2. spring.datasource.url=jdbc:postgresql://172.20.101.53:5439/irmc?currentSchema=xxl_job
    3. spring.datasource.username=postgres
    4. spring.datasource.password=postgres
    5. spring.datasource.driver-class-name=org.postgresql.Driver

    3 mapper中 mysql数据库方言替换

    mapper 中主要修改2部分

    分页写法 :

    mysql 中的分页为

     limit #{offset} ,#{pageSize}

    postgre 中需要 修改为 

     LIMIT #{pagesize} offset #{offset}
    时间函数

    mysql

    1. <select id="findDead" parameterType="java.util.HashMap" resultType="java.lang.Integer" >
    2. SELECT t.id
    3. FROM xxl_job_registry AS t
    4. WHERE t.update_time DATE_ADD(#{nowTime},INTERVAL -#{timeout} SECOND)
    5. select>

    postgre

    1. SELECT t.id
    2. FROM xxl_job_registry AS t
    3. WHERE t.update_time (timestamp'${nowTime}'- INTERVAL '${timeout} S' )

    4 数据库初始化脚本

    1. #
    2. # XXL-JOB v2.4.0
    3. # Copyright (c) 2015-present, xuxueli.
    4. CREATE database if NOT EXISTS `xxl_job` default character set utf8mb4 collate utf8mb4_unicode_ci;
    5. use `xxl_job`;
    6. SET NAMES utf8mb4;
    7. CREATE TABLE `xxl_job_info` (
    8. `id` int(11) NOT NULL AUTO_INCREMENT,
    9. `job_group` int(11) NOT NULL COMMENT '执行器主键ID',
    10. `job_desc` varchar(255) NOT NULL,
    11. `add_time` datetime DEFAULT NULL,
    12. `update_time` datetime DEFAULT NULL,
    13. `author` varchar(64) DEFAULT NULL COMMENT '作者',
    14. `alarm_email` varchar(255) DEFAULT NULL COMMENT '报警邮件',
    15. `schedule_type` varchar(50) NOT NULL DEFAULT 'NONE' COMMENT '调度类型',
    16. `schedule_conf` varchar(128) DEFAULT NULL COMMENT '调度配置,值含义取决于调度类型',
    17. `misfire_strategy` varchar(50) NOT NULL DEFAULT 'DO_NOTHING' COMMENT '调度过期策略',
    18. `executor_route_strategy` varchar(50) DEFAULT NULL COMMENT '执行器路由策略',
    19. `executor_handler` varchar(255) DEFAULT NULL COMMENT '执行器任务handler',
    20. `executor_param` varchar(512) DEFAULT NULL COMMENT '执行器任务参数',
    21. `executor_block_strategy` varchar(50) DEFAULT NULL COMMENT '阻塞处理策略',
    22. `executor_timeout` int(11) NOT NULL DEFAULT '0' COMMENT '任务执行超时时间,单位秒',
    23. `executor_fail_retry_count` int(11) NOT NULL DEFAULT '0' COMMENT '失败重试次数',
    24. `glue_type` varchar(50) NOT NULL COMMENT 'GLUE类型',
    25. `glue_source` mediumtext COMMENT 'GLUE源代码',
    26. `glue_remark` varchar(128) DEFAULT NULL COMMENT 'GLUE备注',
    27. `glue_updatetime` datetime DEFAULT NULL COMMENT 'GLUE更新时间',
    28. `child_jobid` varchar(255) DEFAULT NULL COMMENT '子任务ID,多个逗号分隔',
    29. `trigger_status` tinyint(4) NOT NULL DEFAULT '0' COMMENT '调度状态:0-停止,1-运行',
    30. `trigger_last_time` bigint(13) NOT NULL DEFAULT '0' COMMENT '上次调度时间',
    31. `trigger_next_time` bigint(13) NOT NULL DEFAULT '0' COMMENT '下次调度时间',
    32. PRIMARY KEY (`id`)
    33. ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4;
    34. CREATE TABLE `xxl_job_log` (
    35. `id` bigint(20) NOT NULL AUTO_INCREMENT,
    36. `job_group` int(11) NOT NULL COMMENT '执行器主键ID',
    37. `job_id` int(11) NOT NULL COMMENT '任务,主键ID',
    38. `executor_address` varchar(255) DEFAULT NULL COMMENT '执行器地址,本次执行的地址',
    39. `executor_handler` varchar(255) DEFAULT NULL COMMENT '执行器任务handler',
    40. `executor_param` varchar(512) DEFAULT NULL COMMENT '执行器任务参数',
    41. `executor_sharding_param` varchar(20) DEFAULT NULL COMMENT '执行器任务分片参数,格式如 1/2',
    42. `executor_fail_retry_count` int(11) NOT NULL DEFAULT '0' COMMENT '失败重试次数',
    43. `trigger_time` datetime DEFAULT NULL COMMENT '调度-时间',
    44. `trigger_code` int(11) NOT NULL COMMENT '调度-结果',
    45. `trigger_msg` text COMMENT '调度-日志',
    46. `handle_time` datetime DEFAULT NULL COMMENT '执行-时间',
    47. `handle_code` int(11) NOT NULL COMMENT '执行-状态',
    48. `handle_msg` text COMMENT '执行-日志',
    49. `alarm_status` tinyint(4) NOT NULL DEFAULT '0' COMMENT '告警状态:0-默认、1-无需告警、2-告警成功、3-告警失败',
    50. PRIMARY KEY (`id`),
    51. KEY `I_trigger_time` (`trigger_time`),
    52. KEY `I_handle_code` (`handle_code`)
    53. ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4;
    54. CREATE TABLE `xxl_job_log_report` (
    55. `id` int(11) NOT NULL AUTO_INCREMENT,
    56. `trigger_day` datetime DEFAULT NULL COMMENT '调度-时间',
    57. `running_count` int(11) NOT NULL DEFAULT '0' COMMENT '运行中-日志数量',
    58. `suc_count` int(11) NOT NULL DEFAULT '0' COMMENT '执行成功-日志数量',
    59. `fail_count` int(11) NOT NULL DEFAULT '0' COMMENT '执行失败-日志数量',
    60. `update_time` datetime DEFAULT NULL,
    61. PRIMARY KEY (`id`),
    62. UNIQUE KEY `i_trigger_day` (`trigger_day`) USING BTREE
    63. ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4;
    64. CREATE TABLE `xxl_job_logglue` (
    65. `id` int(11) NOT NULL AUTO_INCREMENT,
    66. `job_id` int(11) NOT NULL COMMENT '任务,主键ID',
    67. `glue_type` varchar(50) DEFAULT NULL COMMENT 'GLUE类型',
    68. `glue_source` mediumtext COMMENT 'GLUE源代码',
    69. `glue_remark` varchar(128) NOT NULL COMMENT 'GLUE备注',
    70. `add_time` datetime DEFAULT NULL,
    71. `update_time` datetime DEFAULT NULL,
    72. PRIMARY KEY (`id`)
    73. ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4;
    74. CREATE TABLE `xxl_job_registry` (
    75. `id` int(11) NOT NULL AUTO_INCREMENT,
    76. `registry_group` varchar(50) NOT NULL,
    77. `registry_key` varchar(255) NOT NULL,
    78. `registry_value` varchar(255) NOT NULL,
    79. `update_time` datetime DEFAULT NULL,
    80. PRIMARY KEY (`id`),
    81. KEY `i_g_k_v` (`registry_group`,`registry_key`,`registry_value`)
    82. ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4;
    83. CREATE TABLE `xxl_job_group` (
    84. `id` int(11) NOT NULL AUTO_INCREMENT,
    85. `app_name` varchar(64) NOT NULL COMMENT '执行器AppName',
    86. `title` varchar(12) NOT NULL COMMENT '执行器名称',
    87. `address_type` tinyint(4) NOT NULL DEFAULT '0' COMMENT '执行器地址类型:0=自动注册、1=手动录入',
    88. `address_list` text COMMENT '执行器地址列表,多地址逗号分隔',
    89. `update_time` datetime DEFAULT NULL,
    90. PRIMARY KEY (`id`)
    91. ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4;
    92. CREATE TABLE `xxl_job_user` (
    93. `id` int(11) NOT NULL AUTO_INCREMENT,
    94. `username` varchar(50) NOT NULL COMMENT '账号',
    95. `password` varchar(50) NOT NULL COMMENT '密码',
    96. `role` tinyint(4) NOT NULL COMMENT '角色:0-普通用户、1-管理员',
    97. `permission` varchar(255) DEFAULT NULL COMMENT '权限:执行器ID列表,多个逗号分割',
    98. PRIMARY KEY (`id`),
    99. UNIQUE KEY `i_username` (`username`) USING BTREE
    100. ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4;
    101. CREATE TABLE `xxl_job_lock` (
    102. `lock_name` varchar(50) NOT NULL COMMENT '锁名称',
    103. PRIMARY KEY (`lock_name`)
    104. ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4;
    105. INSERT INTO `xxl_job_group`(`id`, `app_name`, `title`, `address_type`, `address_list`, `update_time`) VALUES (1, 'xxl-job-executor-sample', '示例执行器', 0, NULL, '2018-11-03 22:21:31' );
    106. INSERT INTO `xxl_job_info`(`id`, `job_group`, `job_desc`, `add_time`, `update_time`, `author`, `alarm_email`, `schedule_type`, `schedule_conf`, `misfire_strategy`, `executor_route_strategy`, `executor_handler`, `executor_param`, `executor_block_strategy`, `executor_timeout`, `executor_fail_retry_count`, `glue_type`, `glue_source`, `glue_remark`, `glue_updatetime`, `child_jobid`) VALUES (1, 1, '测试任务1', '2018-11-03 22:21:31', '2018-11-03 22:21:31', 'XXL', '', 'CRON', '0 0 0 * * ? *', 'DO_NOTHING', 'FIRST', 'demoJobHandler', '', 'SERIAL_EXECUTION', 0, 0, 'BEAN', '', 'GLUE代码初始化', '2018-11-03 22:21:31', '');
    107. INSERT INTO `xxl_job_user`(`id`, `username`, `password`, `role`, `permission`) VALUES (1, 'admin', 'e10adc3949ba59abbe56e057f20f883e', 1, NULL);
    108. INSERT INTO `xxl_job_lock` ( `lock_name`) VALUES ( 'schedule_lock');
    109. commit;

    附录:替换后的完整地址

    git@github.com:shao139772/xxl-job-2.4.0.git

  • 相关阅读:
    Python每日一练(牛客网新题库)——第10天:从入门到实践四十招
    【硬件开源电路】STM32G070RBT6开发板
    基于Docker_Nginx+LVS+Flask+MySQL的高可用Web集群
    【STM32快速上手】点灯只需4步
    数据仓库中常用的元数据管理系统
    Android开发学习日记--利用元数据给应用设置快捷方式(支付宝为例)
    <基础训练>旅行家的预算(贪心算法)
    Nginx限流熔断
    并发编程八 Collections之Map&List&Set
    解决“yarn : 无法加载文件 C:Progr Files\nodejs yarn.ps1,因为在此系统上禁止运行脚本的问题-使用命令更改计算机的执行策略
  • 原文地址:https://blog.csdn.net/qq_29308413/article/details/133312823