跳转到主要内容

工作流

统一编制的数据,分析和人工智能在Lakehouse

工作流的头

砖工作流编排管理服务,与砖Lakehouse完全集成平台。bob体育客户端下载工作流可以让你轻松地定义、管理和监控多任务对ETL工作流,分析和机器学习管道。广泛支持的任务类型,深度可观测性能力和可靠性高,数据团队能够更好的自动化和编排任何管道和变得更有效率。

yipit

“如果我们回到2018年和砖工作流是可用的,我们就不会考虑构建一个定制的气流设置。我们只会使用工作流。”

工程经理——Hillevi Crognale YipitData
BOB低频彩

图6

简单的创作

无论你是一个数据工程师,数据分析师或数据科学家,轻松地定义工作流,只需单击几下鼠标就或使用您最喜爱的IDE。

图形

可行的见解

得到全面了解每个任务运行在每个工作流和立即得到通知需要解决的问题。

图标的图形

可靠性验证

有完全管理编制服务意味着拥有内心的宁静,你的生产工作流程启动并运行。有99.95%的正常运行时间,砖工作流是由成千上万的组织信任。

它是如何工作的呢?

工作流marketecture

统一的砖Lakehouse平台bob体育客户端下载

可靠性在生产

深监测和可观测性

批处理和流

高效的计算

无缝的用户体验

wood mackenzie

“使用砖工作流允许我们鼓励协作和分解过程的不同阶段之间的墙。它允许我们说同样的语言。”

副总裁-吴Yanyan数据,Wood Mackenzie
BOB低频彩
工作流

统一的砖Lakehouse平台bob体育客户端下载

与外部业务流程工具,砖与砖Lakehouse完全集成的工作流平台。bob体育客户端下载这意味着你获得本机工作区中的工作流编写和自动化任何Lakehouse能力包括的能力三角洲生活表管道,砖的笔记本砖的SQL查询。与统一目录,得到每个工作流自动化的数据沿袭所以你留在控制整个组织的所有数据资产。

可靠性在规模

可靠性在规模

每一天,成千上万的组织信任砖工作流运行的数以百万计的生产工作负载在AWS, Azure和GCP 99.95%正常运行时间。有完全管理编制工具构建到砖Lakehouse意味着你不需要维护,更新或排除编排的另一个单独的工具。

深监测和可观测性

深监测和可观测性

全面整合与Lakehouse平台意味着砖比任何外部编排工作流提供了更好的bob体育客户端下载可观测性工具。在每个工作流运行控制通过一个完整的视图和设置失败的通知提醒您的团队通过电子邮件,松弛,PagerDuty或自定义webhook所以你可以获得成功之前的问题快速解决数据消费者的影响。

批处理和流

批处理和流

砖工作流为你提供了一个单一的解决方案Lakehouse编排任务在任何情况下。使用预定的工作流运行循环工作,在预设的时间做批摄入或实现实时的数据管道连续运行。你也可以设置一个工作流运行新数据可用时使用文件到达触发

高效的计算

高效的计算

编排与砖工作流自动给你更好的性价比,生产工作负载。当利用自动获得显著的成本节约工作的集群运行成本更低,而且只有当一份工作计划,这样你就不会支付未使用的资源。此外,共享工作的集群让你重复使用计算资源的多个任务,这样你就可以优化资源利用率。

控制

集群”很容易旋转一次,重用了所有不同的步骤和自旋下来当你完成。”

——吉米·库珀联合创始人兼首席技术官,控制
BOB低频彩
工作流

无缝的用户体验

在自己喜欢的环境中定义工作流,轻松地创建工作流的砖工作区UI或使用你最喜欢的IDE。定义任务使用版本控制的笔记本在砖回购或在一个偏远的Git存储库和坚持DevOps如CI / CD的最佳实践。

集成

砖工作流提供了无缝集成与主导产业合作伙伴提供您灵活地定义工作流,满足你的需要和你的数据解决方案的选择bob体育外网下载

印度生物技术部实验室标志
Arcion
matillion标志
azure数据工厂
apache气流
fivetran-logo-small.svg
印度生物技术部实验室标志
Arcion
matillion标志
azure数据工厂
apache气流
fivetran-logo-small.svg

常见问题解答

编制的数据,分析和人工智能,指的是自动化、部署和管理等工作流程的ETL数据管道和机器学习模型的训练。编制数据操作的一个重要组成部分,将数据解决方案生产至关重要。编制涉及管理工作流任务之间的依赖关系和调度执行这些任务。编制还包括计算资源分配和监控工作流。

准备好开始了吗?