xxl-job使用spring端口(不额外占用端口)

前言

在使用xxl-job的过程中,需要给每个执行器额外配置一个端
口(默认9999),这导致服务除了web服务端口,
还要额外多占用一个端口,多少有些不爽,有没有可能xxl直接
复用spring-boot所占用的端口呐?

EmbedServer

要想知道是否可行,首先得清楚为什么xxl-job要独占一个端口

实际上,每个要执行定时任务得微服务都是xxl-job的一个执行器,
执行器要与调度中心进行通讯:接受调度指令/上传日志文件/心跳
等,因此在xxl-job-core包中,会在初始化时启动一个EmbedServer

img.png

其内部开启一个socket负责与调度中心通讯(主要是接受调度中心的指令),使用的网络框架是netty


img_1.png

于是我们的服务往往呈现如下场景


img_2.png

那么问题来了,调度中心与执行器通讯使用的什么协议呐?看一下netty的handler
就可得出结论,我们最熟悉的:HTTP

img_3.png

思路

既然调度中心的调度指令是通过http协议传输过来的,从理论来讲完全可以让调度中心
的请求发送到spring-boot的端口上,接受请求后按原来的执行逻辑执行对应的代码即可,
这样EmbedServer就可以删除,netty可以不用,最重要的是服务不会额外占用端口了

实现

spring接口

贴一下执行器接受请求处理的核心代码(EmbedHttpServerHandler中):

switch(uri){
        case"/beat": // 心跳
        return executorBiz.beat();
        case"/idleBeat": // 空闲心跳
        IdleBeatParam idleBeatParam=GsonTool.fromJson(requestData,IdleBeatParam.class);
        return executorBiz.idleBeat(idleBeatParam);
        case"/run": // 执行任务
        TriggerParam triggerParam=GsonTool.fromJson(requestData,TriggerParam.class);
        return executorBiz.run(triggerParam);
        case"/kill": // 终止任务
        KillParam killParam=GsonTool.fromJson(requestData,KillParam.class);
        return executorBiz.kill(killParam);
        case"/log": // 获取日志
        LogParam logParam=GsonTool.fromJson(requestData,LogParam.class);
        return executorBiz.log(logParam);
default:
        return new ReturnT<String>(ReturnT.FAIL_CODE,"invalid request, uri-mapping("+uri+") not found.");
        }

其实就是根据不同的接口uri做对应的处理,一共五个接口,spring实现这5个接口再简单不过了,
直接用@RequestMapping就可以了,但我采用的方式是使用spring的动态注册接口工具RequestMappingHandlerMapping

代码如下:


@Component
@Slf4j
public class JobServer {

    /**
     * 定义一个请求的前缀
     */
    @Value("${job.executor.pre}")
    private String pre;

    private ExecutorBiz executorBiz;

    @Autowired
    private RequestMappingHandlerMapping requestMappingHandlerMapping;

    @PostConstruct
    public void init() throws NoSuchMethodException {
        // 初始化执行器
        this.executorBiz = new ExecutorBizImpl();
        // 处理器
        final RequestHandler handler = new RequestHandler(this.executorBiz);
        // 回调处理方法
        final Method method =
                RequestHandler.class.getDeclaredMethod("invoke", HttpServletRequest.class, String.class);
        // 注册路由和回调方法
        this.requestMappingHandlerMapping.registerMapping(
                RequestMappingInfo
                        .paths(this.pre + "/beat", this.pre + "/idleBeat", this.pre + "/run",
                                this.pre + "/kill", this.pre + "/log")
                        .methods(RequestMethod.POST).build(),
                handler,
                method);
    }

    @AllArgsConstructor
    private class RequestHandler {
        private ExecutorBiz executorBiz;

        /**
         * 客户端接受中心调度请求处理
         */
        @ResponseBody
        public Object invoke(final HttpServletRequest request, @RequestBody final String body) throws Throwable {
            String uri = request.getRequestURI();
            uri = uri.replace(JobServer.this.pre, "");
            final String requestData = body;

            // services mapping
            try {
                switch (uri) {
                    case "/beat":
                        return this.executorBiz.beat();
                    case "/idleBeat":
                        final IdleBeatParam idleBeatParam = GsonTool.fromJson(requestData, IdleBeatParam.class);
                        return this.executorBiz.idleBeat(idleBeatParam);
                    case "/run":
                        final TriggerParam triggerParam = GsonTool.fromJson(requestData, TriggerParam.class);
                        return this.executorBiz.run(triggerParam);
                    case "/kill":
                        final KillParam killParam = GsonTool.fromJson(requestData, KillParam.class);
                        return this.executorBiz.kill(killParam);
                    case "/log":
                        final LogParam logParam = GsonTool.fromJson(requestData, LogParam.class);
                        return this.executorBiz.log(logParam);
                    default:
                        return new ReturnT<String>(ReturnT.FAIL_CODE,
                                "invalid request, uri-mapping(" + uri + ") not found.");
                }
            } catch (final Exception e) {
                JobServer.log.error(e.getMessage(), e);
                return new ReturnT<String>(ReturnT.FAIL_CODE, "request error:" + ThrowableUtil.toString(e));
            }
        }
    }
}

此时spring就拥有了与原netty一样功能的5个接口,我还加了一个前缀,毕竟例如"/run"的接口地址太宽泛

注册地址

有了五个接口,下一步就是让调度中心发出指令时走这五个接口即可,如何实现呐?

调度中心中的注册地址是自动注册的,就是执行器的ip+port,调度中心发送指令其实就是通过httpClient调用这个
地址再加上五个接口的uri,所以只要执行器注册时候注册新的地址(spring的端口),事情就完美解决了

xxl-job-core中启动netty服务成功时才会去调度中心注册地址:


img_4.png

由于现在不需要netty了,所以这段要删掉,但要保留注册逻辑,并注册我们的新地址,所以不可避免的要
修改xxl-job-core的代码

修改XxlJobExecutorstart方法

public void start()throws Exception{

        // init logpath
        JobFileAppender.initLogPath(this.logPath);

        // init invoker, admin-client
        this.initAdminBizList(this.adminAddresses,this.accessToken);

        // init JobLogFileCleanThread
        JobLogFileCleanThread.getInstance().start(this.logRetentionDays);

        // init TriggerCallbackThread
        TriggerCallbackThread.getInstance().start();

        /** 这之下原来的代码是initEmbedServer(address, ip, port, appname, accessToken),现在直接改为注册 **/
        // get ip
        String ip=(this.ip!=null&&this.ip.trim().length()>0)?this.ip:IpUtil.getIp();
        // generate address,这里的port就是spring的port,并加入前缀
        String address=this.address;
        if(this.address==null||this.address.trim().length()==0){
        String ip_port_address=IpUtil.getIpPort(ip,this.port); // registry-address:default use address to registry , otherwise use ip:port if address is null
        address="http://{ip_port}".replace("{ip_port}",ip_port_address);
        }
        // start registry,开始注册
        ExecutorRegistryThread.getInstance().start(this.appname,address+this.pre);
        }
解除注册

XxlJobExecutordestroy方法,负责在执行器关闭时关闭EmbedServer,由于现在EmbedServer
已删除,所以只保留解除注册和之后的逻辑即可

public void destroy(){
        // stop registry 原stopEmbedServer()
        ExecutorRegistryThread.getInstance().toStop();
// 其余保留

总结

到此就实现了xxl-job走spring的接口,不额外占用端口,好处显而易见,但也有一点坏处:导致定时任务调度
共用了处理web请求的线程池,自行评估即可

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 194,088评论 5 459
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 81,715评论 2 371
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 141,361评论 0 319
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 52,099评论 1 263
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 60,987评论 4 355
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 46,063评论 1 272
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 36,486评论 3 381
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 35,175评论 0 253
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 39,440评论 1 290
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 34,518评论 2 309
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 36,305评论 1 326
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 32,190评论 3 312
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 37,550评论 3 298
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 28,880评论 0 17
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,152评论 1 250
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 41,451评论 2 341
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 40,637评论 2 335

推荐阅读更多精彩内容