Delta Live테이블

신뢰할수있는데이터엔지니어링을간편하게실행

报名데모 보기

Delta Live Tables (DLT)使构建和管理可靠的批处理和流数据管道变得很容易,这些数据管道可以在平台上交付高质量的数据Databricks Lakehouse平bob体育客户端下载台.DLT帮助数据工程团队简化ETL具有声明式管道开发、自动数据测试以及用于监视和恢复的深度可见性的开发和管理。

배경이미지

轻松构建和维护数据管道

使用Delta Live Tables,可以轻松地在SQL或Python中定义端到端数据管道。只需指定数据源、转换逻辑和数据的目标状态——而不是手动将孤立的数据处理作业拼接在一起。自动维护跨管道的所有数据依赖关系,并使用与环境无关的数据管理重用ETL管道。批量运行或流媒体模式,并为每个表指定增量计算或完整计算。

自动数据质量测试

三角洲生活表는다운스트림사용자에게고품질의데이터를제공하여정확하고유용한BI,데이터사이언스및머신러닝을제공하도록지원합니다。검증및무결성검사를통해잘못된데이터가테이블로흘러들어가지못하게예방하고,사전정의된오류정책(데이터장애,누락,알림,격리)으로데이터품질오류가발생하지않도록합니다。또한시간의흐름에따른데이터품질동향을모니터링하여데이터의발전양상에관한인사이트를얻고변화가필요한지점이어디인지파악할수도있습니다。

通过高效的计算自动缩放成本效益流

Delta Live Tables Enhanced Autoscaling被设计用来处理尖尖的和不可预测的流工作负载。它通过在维护端到端sla的同时只扩展到必要的节点数量来优化集群利用率,并在利用率较低时优雅地关闭节点以避免不必要的开销。

管道监控和可观察性的深度可见性

운영통계와데이터이미지를시각적으로추적하는도구를사용하여파이프라인운영에대한심층적인정보를확보하세요。자동오류처리와간편한재생기능으로가동중단시간을줄여보세。배포와업그레이드를클릭한번으로처리하고유지관리속도를높여보세。

사용 사례

统一批处理和流式ETL

生成和运行批处理和流媒体管道在一个地方,具有可控和自动刷新设置,节省时间,降低操作复杂性。对于湖屋上的数据流,使用Delta Live Tables流媒体ETL是最好的开始。

데이터파이프라배포및테스트단순화

하나의코드베이스에여러개의데이터사본이서로분리되어있고업데이트될때는데이터계통정보를캡처하여어디서나데이터를최신으로유지하는데사용할수있습니다。그러면개발,준비및프로덕션단계에서동일한쿼리정의세트의실행이가능합니다。

규제건준수

이벤트로그로분석및감사에사용할목적의모든테이블관련정보를자동으로캡처합니다。조직내에서데이터흐름의양상을이해하고규정건을준수하세。

healthdirect
Atlassian고객사례

고객 사례

데이터및ai를사용한환자건강중심치료
哥伦比亚
Atlassian고객사례

고객 사례

클라우드로이동으로
데이터중심리테일이라는새로운시대가개막

“Shell에서는모든센서데이터를통합데이터스토어로취합하고있습니다。우리팀은三角洲生活表덕분에(수조건단위의기록)규모로데이터를관리하는시간과노력을절약하고AI엔지니어링기능을지속적으로향상할수있었습니다。砖는이와같은기능으로기존레이크하우스아키텍처를강화하며,우리회사와같은곳에서중시하는ETL및데이터웨어하우스시장에혁신적변화를일으키고있습니다。Databricks를혁신파트너로삼아지속적으로함께일할수있어기쁩니다。”

——Dan Jeavons,데이터사이언스총괄,壳牌

리소스

여러분에게필한모든리소스가한곳에있습니다。이미지

여러분에게필한모든리소스가한곳에있습니다。

使用Delta Live Tables on Databricks探索有关数据工程好处的资源。