
DolphinScheduler (apache-dolphinscheduler-2.0.6-bin.tar.gz) (已安装)
5星
- 浏览量: 0
- 大小:None
- 文件类型:None
简介:
这是一个Apache DolphinScheduler 2.0.6版本的二进制文件包,已经完成安装。该调度系统支持工作流任务自动化和管理,提供用户友好的界面及高度可扩展性。
Apache DolphinScheduler 是一个分布式且易于扩展的可视化 DAG 工作流任务调度开源系统,旨在解决数据研发 ETL 中错综复杂的依赖关系以及无法直观监控任务健康状态等问题。DolphinScheduler 以 DAG 流式的方式将 Task 组装起来,并提供实时监控任务运行状态的能力;同时支持重试、从指定节点恢复失败的任务、暂停及终止任务等操作,拥有简单易用的 DAG 监控界面,所有流程定义均为可视化形式,通过拖拽任务来定制 DAG。此外,它还能够通过 API 方式与第三方系统对接,并具备一键部署高可靠性的去中心化多 Master 和多 Worker 能力以及自身的 HA 功能。
该调度器采用任务队列机制以避免过载问题,不会导致机器卡死;支持暂停恢复操作、多租户环境及应对大数据的使用场景。它还能够处理多种类型的任务,例如 Spark、Hive、MapReduce(mr)、Python 脚本和 Shell 命令等。
DolphinScheduler 具备高扩展性,允许自定义任务类型,并且调度器采用分布式调度方式,使得调度能力随着集群规模的增长而线性增加。Master 和 Worker 实例可以动态地上下线以适应不同的需求场景。
全部评论 (0)
还没有任何评论哟~


