跳转到主要内容
bob体育客户端下载平台的博客

有什么新砖统一编目数据+人工智能峰会2022

所有的数据和人工智能资产统一管理
分享这篇文章

更新:统一目录现在一般用于AWS和Azure。

今天我们兴奋地宣布,统一目录,统一对所有数据资产的治理解决方案Lakehouse,将通常用于AWS和Azure在即将到来的几周。目前,你可以申请一个公共预览或接触你的砖项目团队的成员。

在之前的博客,我们制定了我们的愿景管理lakehouse以及如何统一目录可以帮助客户简化大规模治理。这个博客将探索最近更新统一目录和我们日益增长的合作伙伴生态系统。

有什么新的统一的目录数据+人工智能峰会2022 ?

自动数据沿袭所有工作负载

统一目录现在自动跟踪数据血统查询执行的任何语言。数据沿袭捕获到表和列的水平,而关键资产,如笔记本电脑、仪表板和跟踪工作。血统打开几个用例,包括评估的影响变化表对数据消费者,和自动生成文档,消费者可以使用lakehouse理解数据。有关更多信息,请参见我们的最近的博客职位。

内置的数据搜索和发现

统一目录现在包括一个内置的搜索功能。一旦在统一注册目录数据,终端用户可以很容易地搜索元数据字段包括表名、列名,评论为他们找到他们所需要的数据分析。这个搜索功能自动利用到位的治理模型统一目录。用户只能看到搜索结果进行数据访问,生产率的提高为用户服务,和一个关键控制数据管理员希望确保敏感数据的保护。

搜索和发现统一目录

简化与特权的继承访问控制

统一目录提供了一个简单的模型来控制对数据的访问通过UI或SQL。我们已经扩展这个模型允许数据管理员建立访问表的1000年代通过单击或SQL语句。这是通过一种特权的继承模型管理员可以设置访问整个目录或政策对象的模式。例如,执行以下SQL语句将ml_team读访问权所有当前表和视图在主目录,以及任何在未来创建的。

格兰特选择目录主要ml_team

这也可以作为一种集安全访问目录和违约模式。一个常见的模式可能会给一个团队一个模式来存储数据。现在管理员可以设置一个政策模式,默认情况下所有的团队成员可以阅读由其他人创建的对象。

信息模式

数据库系统内信息模式已经基本资产几十年了。他们提供了一组预定义的视图,描述的对象在数据库中——例如表创建了什么,当由世卫组织、访问已获得在每个水平,在其他的事情。此元数据通常是利用用户了解系统中的数据可用,而且自动报告生成等主题访问每个表的水平。统一目录带来lakehouse信息模式的概念。每个目录中创建统一到与一个预定义的模式称为information_schema定义了一组视图描述了目录。这个可以查询从DBSQL或笔记本电脑环境。
信息模式统一目录
信息模式统一目录

Azure身份统一目录管理

我们感到兴奋,统一目录现在支持使用Azure托管身份访问管理存储和外部存储目录metastore统一。身份管理微软Azure构造,为应用程序提供一个身份连接到资源时使用Azure Active Directory (AAD)的支持。到目前为止,统一编目依赖服务主体身份来访问数据在Azure湖数据存储(ADLS)。身份管理有两个主要的好处在这个用例的服务主体。首先,管理身份不需要维护凭证或旋转的秘密。其次他们提供一种方法来连接到ADLS通过存储防火墙保护。

升级你的蜂巢Metastore统一目录

统一目录现在提供了一个无缝的升级体验从你现有的蜂巢Metastore利用上面描述的所有新功能!用户可以选择1000年代的表内立刻升级我们的目的建立用户界面。升级工具通过复制工作表的元数据从现有蜂巢Metastores metastore统一目录。这也将自动解决DBFS挂载点定义中使用的表,数据可以跨整个砖安全地访问帐户。对于那些喜欢在ui代码,我们也让SQL语法(“创建表像…”)用于针对砖集群运行或SQL仓库。

升级蜂巢Metastore

更好的治理和编目合作伙伴一起bob体育外网下载

除了所有的特性和功能你读到的,我们也有一个健康和充满活力的生态系统的合作伙伴加入我们在支持团结与他们的产品目录。bob体育外网下载生态系统每天仍在不断增长中。

Privacera
“Privacera集成了统一目录通过利用新的api砖建造的翻译团队,通过政策层Privacera建造的。数据集成是透明的消费者和IT管理员和支持相同的细粒度访问控制功能,支持Privacera集成遗留砖高并发的集群”。- - - - - -鲍斯Durai

鲍斯Durai
鲍斯Durai Privacera公司的共同创始人兼首席技术官。黄宗泽也ASF开源项目的创建者Apache管理员和安全的思想领袖和管理空间bob下载地址。

阅读更多关于Privacera andUnity目录

Immuta
统一目录,物理数据策略执行本地数据砖,微创数据消费者,不再与插件专为不同的引发运行时——执行正确完成。与此同时,Immuta继续解决管理挑战,提供活动数据监控、元数据发现/集中,可伸缩的政策编制(表、行、列和单元控制),包括利用联合目录的家族特性来简化策略实施,和遵从性报告/报警。- - - - - -史蒂夫Touw

史蒂夫Touw
史蒂夫Touw Immuta公司的共同创始人兼首席技术官。他历史悠久的设计大规模geo-temporal分析在美国情报机构——包括第一Hadoop的一些分析和框架来管理复杂的多租户数据策略控制。

阅读更多关于Immuta和统一目录

Alation
Alation和砖帮助组织获得的数据情报,消除,促进治理能力来推动数字转换项目。Alation允许组织培养作为一种资产,有助于提高数据发现,帮助理解,促进信任和确保遵守相关政策。利用捕获的数据统一metastore, Alation将加强我们现有的集成与砖容易包括元数据从多个工作区。砖和Alation最终将提供目录,Lakehouse血统和策略管理和执法。Alation激动与砖合作,期待共同合作,使数据科学家,工程师和分析师快速将数据转化为业务洞察力。- - - - - -易卜拉欣“Ibby”压力

易卜拉欣压力
易卜拉欣Ibby“压力是Alation产品营销主管

Collibra
Collibra最战略的许多客户已经发现巨大的价值从砖的力量。这一直是我们的重点技术集成与统一目录。Collibra的企业目录给业务带来价值和治理角色,因此,我们认为,统一编目的战术平台重点是一个完美的配对。bob体育客户端下载元数据摄入级别的也有好处,因为不再是一个需要有一个砖集群运行的元数据。我们认为血统,直接从一个平台API像统一目录,更好的质量和更容易更新变化bob体育客户端下载随着时间的处理。- - - - - -沃恩Micciche

沃恩Micciche
沃恩Micciche Collibra技术伙伴关系主任bob体育外网下载

亚特兰大
亚特兰大连接到砖统一目录的API来提取所有相关元数据驱动的发现,治理,在亚特兰大和见解。这种集成允许亚特兰大生成血统表、视图和列的所有工作和语言在砖上运行。通过配对与元数据提取数据堆栈中的其他工具(例如BI、转换、英语教学),亚特兰大可以创建真正的端到端血统。由于统一目录简化交付系统,通过API发送完整的血统,这整个经历是在瞬时大幅减少计算和成本为客户。这使得砖客户整体理解的数据流,获得更深的洞察数据填充他们的模型,运行RCA练习,甚至大规模电力规划治理与亚特兰大的元数据激活引擎。- - - - - -阿米特您正在

阿米特您正在
阿米特您正在是亚特兰大的一名软件架构师主要编制团队

开始使用统一目录在AWS和Azure

参观统一目录文档(AWS,Azure)了解更多BOB低频彩信息。

免费试着砖

相关的帖子

看到所有bob体育客户端下载平台的博客的帖子