Apache DolphinScheduler官方版是一款体积轻量、专业实用的分布式去中心化、易扩展的可视化DAG工作流调度工具,可以帮助用户解决各种数据处理流程中错综复杂的依赖关系,可以帮助用户梳理数据之间的联系,方便用户对系统数据进行调度和各种数据处理;Apache DolphinScheduler界面简洁直观、操作简单方便易使用,支持多用户、多任务类型操作,支持自定义任务类型、分布式计划等多种功能,可以让用户对工作流定时调度、依赖关系调度和工作流全局参数及节点自定义设置等操作,可以说是一款非常灵活便捷且非常专业的可视化工作流任务调度系统软件。
1、以DAG图的方式将Task按照任务的依赖关系关联起来,可实时可视化监控任务的运行状态
2、支持丰富的任务类型:Shell、MR、Spark、SQL(mysql、postgresql、hive、sparksql),Python,Sub_Process、Procedure等
3、支持工作流定时调度、依赖调度、手动调度、手动暂停/停止/恢复,同时支持失败重试/告警、从指定节点恢复失败、Kill任务等操作
4、支持工作流优先级、任务优先级及任务的故障转移及任务超时告警/失败
5、支持工作流全局参数及节点自定义参数设置
6、支持资源文件的在线上传/下载,管理等,支持在线文件创建、编辑
7、支持任务日志在线查看及滚动、在线下载日志等
8、实现集群HA,通过Zookeeper实现Master集群和Worker集群去中心化
9、支持对Master/Worker cpu load,memory,cpu在线查看
10、支持工作流运行历史树形/甘特图展示、支持任务状态统计、流程状态统计
11、支持补数
12、支持多租户
13、支持国际化
高可靠性
分散的多主机和多工人,HA自身支持,过载处理
简单易用
所有流程定义操作均可视化,可视化流程一目了然,一键式部署即可定义关键信息
丰富的场景
支持暂停,恢复操作。支持多租户。支持更多任务类型,例如,spark,hive,mr,shell,python,sub_process
高扩展性
支持自定义任务类型,分布式计划,整体计划能力将随着集群规模线性增加
1、优化了用户使用界面
2、修复了某些已知bug
同类推荐
2022-05-27
立即下载2022-06-13
立即下载2022-07-12
立即下载2022-08-09
立即下载2022-10-29
立即下载2022-11-02
立即下载相关文章
Visual Studio 2010显示行号的方法
2023-01-02Scratch记录小猫运动的轨迹的方法
2022-12-252021强推最好用的几款U盘启动盘制作工具
2022-12-18迅捷CAD转换器中CAD如何批量转换低版本?
2022-11-26360桌面助手关闭截图功能的技巧
2022-11-26爱站SEO工具包如何使用网站日志分析工具?
2022-11-12Macromedia Flash序列号下载(永久激活教程)
2022-01-26如何隐藏五线谱?Guitar Pro隐藏五线谱的方法
2022-01-19WinRAR如何给文件注释?WinRAR给文件注释的技巧
2022-01-15EDIUS常用快捷键_EDIUS快捷键大全
2021-11-15