未分類
31 3 月 2021

咨询一下各位，大家都用什么调度工具

咨询一下各位，大家都用什么调度工具

資深大佬 : heavyrainn 0

最近在做数据平台的项目，作业很多，作业之间的依赖也很复杂，所以需要一款好用且开源的调度工具，烦请各位推荐一下，有什么好用的作业调度工具，谢谢大家
大佬有話說 (9)

  • 資深大佬 : cco

    Oozie，或者自研。当然也有开源的，多少都得二次开发。

  • 資深大佬 : resurgamforever

    Dolphin Scheduler （国产）
    Azkaban
    Schedulis （国产）

  • 資深大佬 : liprais

    airflow

  • 資深大佬 : v218ex

    airflow

  • 資深大佬 : jiezhi

    Oozie+Hue

    不过最近准备切到 Dolphin 了

  • 資深大佬 : hantsy

    看不懂，只在国内看到过作业调度这个词。

    从描述看，如果是我，一些任务，之类的，肯定用 Spring Batch 或者 Java EE/JakartaEE Batch 规范（ Spring Batch 也支持这个规范）去定义任务了。

  • 資深大佬 : zuston

    Azkaban 吧 ，社区还挺活跃的。且是大数据相关的

  • 資深大佬 : forbxy

    airflow+1

  • 資深大佬 : tedzhou1221

    前公司用 azkaban

    @hantsy 你说的是代码层面的，他们说的是组件层面的。但我看很多项目都直接用任务调度框架，例如 XXL-job