合肥网站建设网站建设,河北建设工程信息网正规网站,想做seo哪里有培训的,dw做的网站要多大参考
Apache DolphinScheduler v1.3.9 使用手册
内置组件
masterserverworkserverzookeepertask queuealertapiui
设计
去中心化设计 通过zk选举
UI功能
队列管理 Yarn调度器的资源队列
用户管理 租户对应的是Linux系统用户#xff0c;是Worker执行任务使用的用户 用户…参考
Apache DolphinScheduler v1.3.9 使用手册
内置组件
masterserverworkserverzookeepertask queuealertapiui
设计
去中心化设计 通过zk选举
UI功能
队列管理 Yarn调度器的资源队列
用户管理 租户对应的是Linux系统用户是Worker执行任务使用的用户 用户对应的是DolphinScheduler的用户用于登录DolphinScheduler 默认情况下管理员只有授权和用户管理等权限而普通用户只有创建项目定义工作流、执行工作流等权限
告警组管理 邮件/短信 告警
worker分组管理 在任务执行时可以将任务分配给指定Worker组最终由该组中的Worker节点执行该任务
令牌管理 令牌用于通过接口访问DolphinScheduler各项服务时的用户验证。若需将DolphinScheduler与第三方服务进行集成则需调用其接口此时需使用令牌。
项目管理 工作流定义用于定义工作流包括工作流各节点任务详情及各节点依赖关系等。DAG 工作流实例工作流每执行一次就会生成一个工作流示例。此处可查看正在运行的工作流以及已经完成的工作流。 任务实例工作流中的一个节点任务每执行一次就会生成一个任务实例。此处可用于查看正在执行的节点任务以及已经完成的节点任务。
资源中心 上传jar
Dag节点
sparkhive 可以自定义时间参数datax子节点 支持逻辑关系
代码架构
dolphinscheduler-alert 告警服务dolphinscheduler-api web服务dolphinscheduler-common 通用的常量枚举、工具类、数据结构或者基类dolphinscheduler-dao 数据库访问dolphinscheduler-data-qualitydolphinscheduler-datasource-plugindolphinscheduler-distdolphinscheduler-e2edolphinscheduler-log-server LoggerServer 用于Rest Api通过RPC查看日志dolphinscheduler-master MasterServer服务主要负责 DAG 的切分和任务状态的监控dolphinscheduler-meterdolphinscheduler-microbenchdolphinscheduler-pythondolphinscheduler-registrydolphinscheduler-remote 基于 netty 的客户端、服务端dolphinscheduler-server 日志与心跳服务dolphinscheduler-service 包含Quartz、Zookeeper、日志客户端访问服务便于server模块和api模块调用dolphinscheduler-spidolphinscheduler-standalone-serverdolphinscheduler-task-plugindolphinscheduler-toolsdolphinscheduler-uidolphinscheduler-ui-nextdolphinscheduler-worker WorkerServer服务主要负责任务的提交、执行和任务状态的更新
