2020-10-20 XXL-JOB概念介绍-类比木工

XXL-JOB

  1. 概述
    XXL-JOB是一个分布式任务调度平台,其核心设计目标是开发迅速、学习简单、轻量级、易扩展。现已开放源代码并接入多家公司线上产品线,开箱即用。
  2. 部署安装,安装上边的地址执行即可,下边部分重点解释XXL-JOB的名词概念
  3. 场景
    每天都有短信发送任务,假设有个短信发送任务表,sms_send_tasks,里边有客户电话和短信内容,还有发送时间send_time,当send_time>now() 的时候,发送短信;发送短信数据大约1000W;(这个活我们叫做个床)
  4. 用XXL-JOB实现;先建个执行器


    新增执行器
  5. 启动业务代码,注册上 xxl-job-executor-sms-send,如下图


    执行器注册

执行器和应用实例的关系 :新建执行器的时候,会指定个appName,这个就是用来标志执行器,应用中配置这个appName=xxl-job-executor-sms-send,那么在控制台就可以看到这个执行器下有这个应用包括ip和端口,如下
image.png

执行器下可以有多个应用服务器,把应用服务器当成工人(真正干活的),那么执行器就相当于木工这种总称;木工A,木工B……

  1. 因为这个家具比较大(1000W条发短信任务),一个工人(注册节点)来做要很长时间,所以我们注册两个工人,当然也可以多个,如下
    image.png
  2. 现在就是木工团队有两个木工(http://10.110.20.170:9999/)和木工(http://10.110.20.169:9999/),我们开始让两个木工一块干活(分配任务)
  3. 分配任务
    image.png

任务的概念,做个床,就是任务。做个床(任务)需要木工(短信发送执行器)来做;任务执行必须指定执行器,至于执行器下边有几个木工,任务不关注;
做个床这个任务,有个真正的handler,这个相当于木工的刀;做床这个任务,需要木工的刀(SendSmsShardingJobHandler)做;
我们再来梳理下木工和刀的关系,木工A(http://10.110.20.170:9999)的工具很多,刀,叉,剪子,斧子……(应用代码里的方法@XxlJob("SendSmsShardingJobHandler"))

  1. 然后调度中心就开始调度了。相当于有个工头要给两个木工分活,但是这个包工头(调度中心)要管的工人很多,不止是木工,还有瓦工啥的,但是他能分清楚这个活(任务)需要什么工(执行器);于是来了一任务(Cron时间),他就把活分到某个工种上边(执行器);来个个做床的任务,那么包工头(调度中心)分配给木工(短信发送执行器)
  2. 木工A和木工B的合作
    因为木工A和B干的活是一样的(代码是相同的一块),所以要在逻辑上区分到底谁来干;
        int shardIndex = XxlJobContext.getXxlJobContext().getShardIndex();//我是木工A
        int shardTotal = XxlJobContext.getXxlJobContext().getShardTotal();//一共两个木工
        int tId = 短信发送任务id;
        XxlJobLogger.log("分片参数:当前分片序号 = {}, 总分片数 = {}", shardIndex, shardTotal);
        if(tId% shardTotal == shardIndex ){
        //我们用任务取余总节点数量,看于当前节点序号是不是相同,相同的话,就说明是当前节点的任务
        //这是我的任务
        }

这样由木工A和木工B自己来区分是不是自己的任务,不是的就不管;

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 204,684评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 87,143评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 151,214评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,788评论 1 277
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,796评论 5 368
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,665评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,027评论 3 399
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,679评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 41,346评论 1 299
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,664评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,766评论 1 331
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,412评论 4 321
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,015评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,974评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,203评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,073评论 2 350
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,501评论 2 343