精品为您呈现,快乐和您分享!

移动端

收藏本站

OK下载站

当前位置: 首页 > 软件下载 > 编程开发

DolphinScheduler(可视化工作流任务调度系统)v1.3.5官方版

DolphinScheduler(可视化工作流任务调度系统)v1.3.5官方版

类型:编程开发 语言:简体

大小:3.5M 更新时间:2021-02-26

推荐指数:

应用简介


ApacheDolphinScheduler是一个分布式、去中心化、易于扩展的可视化DAG工作流任务调度系统,致力于解决数据处理过程中错综复杂的依赖关系,使调度系统在数据处理过程中开箱即用。









Apache DolphinScheduler是一个分布式、去中心化、易于扩展的可视化DAG工作流任务调度系统,致力于解决数据处理过程中错综复杂的依赖关系,使调度系统在数据处理过程中开箱即用。



DolphinScheduler(可视化工作流任务调度系统)



软件特点



高可靠性



去中心化的多Master、多Worker,支持HA功能,使用任务队列避免过载,不会导致机器卡顿。



简单易用



DAG监控界面,所有流程定义可视化,DAG可通过拖放任务进行定制,通过API连接第三方系统,一键部署



丰富的使用场景



支持暂停和恢复操作。支持多租户,更好应对大数据使用场景。支持更多任务类型,如spark、hive、mr、python、sub_process、shell



高扩展性



支持自定义任务类型。调度器采用分布式调度。调度能力随集群线性增长。 Master和Worker支持动态的线上和线下操作。



16f5fe98908893a4_600_0.jpeg



特征



1.使用DAG图根据任务依赖关系关联任务,可以直观地实时监控任务的运行状态。



2.支持多种任务类型:Shell、MR、Spark、SQL(mysql、postgresql、hive、sparksql)、Python、Sub_Process、Procedure等。



3.支持工作流定时调度、依赖调度、手动调度、手动暂停/停止/恢复,还支持失败重试/报警、指定节点失败恢复、Kill任务等操作。



4.支持工作流优先级、任务优先级、任务故障转移和任务超时报警/失败



5.支持工作流全局参数和节点自定义参数设置



6.支持资源文件在线上传/下载和管理,支持在线文件创建和编辑。



7.支持任务日志在线查看和滚动、日志在线下载等。



8、实现集群HA,通过Zookeeper实现Master集群和Worker集群的去中心化



9.支持在线查看Master/Worker cpu负载、内存、cpu



10.支持工作流运行历史树/甘特图显示、任务状态统计、流程状态统计。



11. 支持补数



12.支持多租户



13.支持国际化



14.还有更多等待伙伴探索