Avatar notebook default
9篇文章 · 5725字 · 1人关注
  • Resize,w 360,h 240
    Airflow之web界面使用

    1.airflow web主页面 DAG: dag_id Schedule:调度时间 Owner:dag拥有者 Recent Tasks:有9个...

  • Resize,w 360,h 240
    Airflow之常用界面功能

    Airflow中常用功能 1.Airflow之新dag上线 点击页面"IDE工作台"-->"文件管理"-->页面底部按钮点击"上传文件"按钮上传...

  • Resize,w 360,h 240
    Airflow之拓扑图&常用命令

    1.Airflow是什么 Airflow:可编程、调度和监控的工作流平台,基于有向无环图(DAG),airflow可以定义一组有依赖的任务,按照...

  • Airflow中的DAG问题排查

    在Airflow中,DAG的跑批就是一个很漫长的过程,如果涉及到贴源层的表很多的时候,我们往往要花几天的时间去跑批,不出问题还好,一旦出现问题,...

  • Resize,w 360,h 240
    Airflow中的DAG应该怎么看

    最近在对T-1的数据进行测试,所以学会如何看DAG就是非常重要的一个环节了。 1.DAG背景 DAG我们都知道,是一个有向无环图,任务都是有顺序...

  • Resize,w 360,h 240
    Airflow的Operator相关算子操作说明

    Airflow中的DAG使用比较多的是就是各种语言的算子。比如BashOperator、PythonOperator、DummyOperator...

  • Resize,w 360,h 240
    Airflow和DAG实例中的相关概念

    DAG:主要是用于数据处理、调度和数据压缩。Airflow中文文档:https://airflow.apachecn.org/#/[https:...

  • Airflow中sensor依赖(DAG依赖链路梳理)

    DAG在执行之前,往往存在很多依赖,需要按顺序进行执行下去。Airflow的Sensor(传感器)可用于保持在一段时间间隔内处于执行中,当满足条...

  • Resize,w 360,h 240
    Airflow中DAG的用法

    airflow官方文档:https://www.kancloud.cn/apachecn/airflow-doc-zh/1944253[http...