经验首页 前端设计 程序设计 Java相关 移动开发 数据库/运维 软件/图像 大数据/云计算 其他经验
当前位置:技术经验 » Java相关 » Java » 查看文章
Java微服务分布式调度Elastic-job环境搭建及配置
来源:jb51  时间:2023/2/10 9:17:32  对本文有异议

什么是任务调度

任务调度是为了自动完成特定任务,在约定的特定时刻去执行人物的过程

为什么需要分布式调度

1.使用Spring定时器,在集群的情况下,可能会导致任务重复执行的情况,当我们部署了多台服务,同时每台服务又有定时任务时,若不进行合理的控制在同一时间,只有一个定时任务启动执行了,这时,定时执行的结果就可能存在混乱和错误了,考虑使用分布式锁,保证任务不会重复执行

2.大大提高了可用性,当做了集群之后,某个项目挂了,任务应该要由另外一个项目继续进行

3.单机处理始终有极限,假设该主服务器有ABCD四个任务,可以将任务分配给自己底下的从服务器,将它们调动起来一起来完成任务

Elastic-Job

zookeeper是一个注册中心,在Elastic-job过程中进行一个选举的功能,以及对节点的监听,谁被选举成leader谁才可以执行任务,一旦leader挂了,将会进行重新的选举,依赖zookeeper里面的信息

环境搭建

第一步:Zookeeper安装并运行

1)解压zookeeper-3.4.11.tar.进入conf目录,复制zoo_sample.cfg文件,命名为zoo.cfg

2)进入bin目录,运行zkServer.cmd就可以了

3)解压ZooInspector运行文件

第二步:创建maven项目添加如下依赖

  1. <dependency>
  2. <groupId>com.dangdang</groupId>
  3. <artifactId>elastic-job-lite-core</artifactId>
  4. <version>2.1.5</version>
  5. </dependency>

第三步:创建任务类

  1. public class MyElasticJob implements SimpleJob {
  2. public void execute(ShardingContext shardingContext){
  3. System.out.println("执行任务"+new Date());
  4. }
  5. }

第四步:创建配置类

  1. public class JobDemo {
  2. public static void main(String[] args) {
  3. //JobScheduler(注册中心对象,任务配置对象)
  4. new JobScheduler(createRegistryCenter(),createJobConfiguration()).init();
  5. }
  6. //定时任务配置
  7. private static LiteJobConfiguration createJobConfiguration() {
  8. //定义作业核心配置newBuilder("任务名称","corn表达式","分片数量")
  9. JobCoreConfiguration simpleCoreConfig = JobCoreConfiguration.newBuilder("myElasticJob","0/5 * * * * ?",1).build();
  10. // 定义SIMPLE类型配置 cn.wolfcode.MyElasticJob
  11. System.out.println("MyElasticJob.class.getCanonicalName---->"+ MyElasticJob.class.getCanonicalName());
  12. SimpleJobConfiguration simpleJobConfig = new SimpleJobConfiguration(simpleCoreConfig,MyElasticJob.class.getCanonicalName());
  13. //定义Lite作业根配置
  14. LiteJobConfiguration simpleJobRootConfig = LiteJobConfiguration.newBuilder(simpleJobConfig).build();
  15. return simpleJobRootConfig;
  16. }
  17. //注册中心配置
  18. private static CoordinatorRegistryCenter createRegistryCenter() {
  19. ZookeeperConfiguration zookeeperConfiguration = new ZookeeperConfiguration("43.143.161.59:2181", "elastic-job-demo");
  20. //设置节点超时时间
  21. zookeeperConfiguration.setSessionTimeoutMilliseconds(100);
  22. //zookeeperConfiguration("zookeeper地址","项目名")
  23. CoordinatorRegistryCenter regCenter = new ZookeeperRegistryCenter(zookeeperConfiguration);
  24. regCenter.init();
  25. return regCenter;
  26. }
  27. }

运行结果:

启动多台机器的时候,只有一台机器运行

当leader终止后,再次进行选取执行任务

更改Zookeeper配置

虽然自己想每十秒执行一次,但运行结果

原因是zookeeper里面不允许覆盖里面配置的,要是想覆盖,就要

否则zookeeper还是读取里面的配置

SpringBoot集成ElasticJob

第一步:添加Maven依赖

  1. <?xml version="1.0" encoding="UTF-8"?>
  2. <project xmlns="http://maven.apache.org/POM/4.0.0"
  3. xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
  4. xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
  5. <modelVersion>4.0.0</modelVersion>
  6. <groupId>cn.wolfcode</groupId>
  7. <artifactId>elstaic-job-boot</artifactId>
  8. <version>1.0.0</version>
  9. <parent>
  10. <groupId>org.springframework.boot</groupId>
  11. <artifactId>spring-boot-starter-parent</artifactId>
  12. <version>2.1.3.RELEASE</version>
  13. </parent>
  14. <properties>
  15. <project.build.sourceEncoding>UTF-8</project.build.sourceEncoding>
  16. <project.reporting.outputEncoding>UTF-8</project.reporting.outputEncoding>
  17. <java.version>1.8</java.version>
  18. </properties>
  19. <dependencies>
  20. <dependency>
  21. <groupId>org.springframework.boot</groupId>
  22. <artifactId>spring-boot-starter-web</artifactId>
  23. </dependency>
  24. <dependency>
  25. <groupId>com.dangdang</groupId>
  26. <artifactId>elastic-job-lite-spring</artifactId>
  27. <version>2.1.5</version>
  28. </dependency>
  29. <dependency>
  30. <groupId>org.projectlombok</groupId>
  31. <artifactId>lombok</artifactId>
  32. </dependency>
  33. </dependencies>
  34. </project>

第二步:创建启动类

  1. @SpringBootApplication
  2. public class ElasticJobServer {
  3. public static void main(String[] args) {
  4. SpringApplication.run(ElasticJobServer.class,args);
  5. }
  6. }

第三步:创建任务类

  1. @Component
  2. public class MyElasticJob implements SimpleJob {
  3. @Override
  4. public void execute(ShardingContext shardingContext) {
  5. System.out.println("定时调度:"+new Date());
  6. }
  7. }

第四步:创建任务配置类

  1. @Configuration
  2. public class JobConfig {
  3. @Bean
  4. public static CoordinatorRegistryCenter registryCenter(@Value("${zookeeper.url}") String url,@Value("${zookeeper.groupName}") String groupName) {
  5. ZookeeperConfiguration zookeeperConfiguration = new ZookeeperConfiguration(url, groupName);
  6. //设置节点超时时间
  7. zookeeperConfiguration.setSessionTimeoutMilliseconds(100);
  8. //zookeeperConfiguration("zookeeper地址","项目名")
  9. CoordinatorRegistryCenter regCenter = new ZookeeperRegistryCenter(zookeeperConfiguration);
  10. regCenter.init();
  11. return regCenter;
  12. }
  13. //功能的方法
  14. public static LiteJobConfiguration createJobConfiguration(Class clazz,String corn,int shardingCount) {
  15. //定义作业核心配置newBuilder("任务名称","corn表达式","分片数量")
  16. JobCoreConfiguration simpleCoreConfig = JobCoreConfiguration.newBuilder(clazz.getSimpleName(),corn,shardingCount).build();
  17. // 定义SIMPLE类型配置 cn.wolfcode.MyElasticJob
  18. System.out.println("MyElasticJob.class.getCanonicalName---->"+ MyElasticJob.class.getCanonicalName());
  19. SimpleJobConfiguration simpleJobConfig = new SimpleJobConfiguration(simpleCoreConfig,clazz.getCanonicalName());
  20. //定义Lite作业根配置
  21. LiteJobConfiguration simpleJobRootConfig = LiteJobConfiguration.newBuilder(simpleJobConfig).build();
  22. return simpleJobRootConfig;
  23. }
  24. @Bean(initMethod = "init")
  25. public SpringJobScheduler testScheduler(MyElasticJob job,CoordinatorRegistryCenter registryCenter){
  26. LiteJobConfiguration jobConfiguration = createJobConfiguration(job.getClass(),"0/5 * * * * ?",1);
  27. return new SpringJobScheduler(job,registryCenter,jobConfiguration);
  28. }
  29. }

第五步:配置文件

zookeeper:
  url: 43.143.161.59:2181
  groupName: elastic-job-boot

到此这篇关于Java微服务分布式调度Elastic-job环境搭建及配置的文章就介绍到这了,更多相关Java Elastic-job内容请搜索w3xue以前的文章或继续浏览下面的相关文章希望大家以后多多支持w3xue!

 友情链接:直通硅谷  点职佳  北美留学生论坛

本站QQ群:前端 618073944 | Java 606181507 | Python 626812652 | C/C++ 612253063 | 微信 634508462 | 苹果 692586424 | C#/.net 182808419 | PHP 305140648 | 运维 608723728

W3xue 的所有内容仅供测试,对任何法律问题及风险不承担任何责任。通过使用本站内容随之而来的风险与本站无关。
关于我们  |  意见建议  |  捐助我们  |  报错有奖  |  广告合作、友情链接(目前9元/月)请联系QQ:27243702 沸活量
皖ICP备17017327号-2 皖公网安备34020702000426号