千兆字机客户使用数据布列克工作流bob体育客户端下载每天协调Databricks湖屋平台业务关键工作量简化这些关键工作量的伟大方法就是模块化管理
现在就有可能通过新任务类型运行作业中允许工作流用户调用先前定义的工作为任务
为什么要模块化管弦
模块构造允许按组织边界拆分DAG,使组织内不同团队能够合作工作流的不同部分。 不同团队子职拥有扩展至测试和更新,提高父工作流可靠性
模块构造还提供可复用性。当数个工作流有常用步骤时,一次性定义这些步骤并重用它作为不同父母工作流中的子工作是有道理的。通过使用参数,复用任务可更加灵活地适应不同父工作流的需要重用作业会减少工作流的维护重担,确保更新和故障修复同时发生并简化复杂工作流
如何启动
开工开始选择新任务类型运行作业中允许工作流用户调用先前定义的工作为任务
二叉搜索作业运行时开始在作业菜单中打作业名
事物考虑
使用运行作业或嵌套三次以上运行作业时,不应创建循环依赖性工作循环依存即运行任务 直接或间接触发例例作业A触发作业B和作业B触发作业A
数据键不支持循环依赖性或嵌套三次以上运行任务的工作,并可能不允许未来发布时运行这些作业
资源类
