让你的数据湖CCPA符合一个统一的数据和分析方法

每天有更多的数字数据被抓获,有各种监管标准等的上升通用数据保护监管(GDPR)和最近的加州消费者隐私法案》(CCPA)。这些隐私法和标准旨在保护消费者免受企业不当收集、使用、或分享他们的个人信息,和改变企业的方式来管理和保护消费者的数据收集和存储。

类似于GDPR, CCPA赋予个人请求:

• 个人信息被抓获,
• 个人信息是如何被使用的,
• 个人信息删除。

此外,CCPA包含“家庭”的信息。这可能大大扩大了个人信息的范围受制于这些请求。未能及时履行可能导致法定罚款和法定赔偿(消费者甚至不需要证明损害赔偿),可以迅速崛起。公司面临的挑战在加州做生意CCPA或者主题,然后,是确保他们可以很快找到,安全,和删除个人信息。

许多公司错误地认为数据隐私GDPR合规流程和控制到位将保证完全符合CCPA-and虽然你可能做了准备GDPR是有用的和一个伟大的开始不太可能足够了。公司需要重点理解他们需要合规,必须确定哪些流程和控制可以有效地防止滥用和非法出售用户数据。

你准备CCPA吗?

CCPA企业可能需要删除所有消费者的个人信息。今天许多组织正在使用或计划使用数据存储湖的绝大多数数据为了有一个全面的视图的客户和业务和权力下游数据科学、机器学习和业务分析。湖缺乏数据结构使它具有挑战性的定位和删除个人记录保持符合监管要求。

这是至关重要的应对消费者的删除请求时,如果一个业务接收超过几个消费者权利请求在很短的时间内,花费的资源符合要求的效果将是巨大的。企业不符合CCPA需求由1月1日,2020年可能受到诉讼和民事处罚。CCPA还包含一个“lookback”时期将它应用于行动和个人信息自1月1日,2019年,使其迅速得到这些解决方案的关键。

把你的数据安全数据以外的湖

坚持CCPA需求时,您的数据湖应该使您能够应对消费者权利要求在规定的时间内没有阻碍你的业务。不幸的是,大多数湖泊缺乏数据管理和数据操纵功能快速定位和删除记录,使这种挑战。

幸运的是,砖提供了一个解决方案。的砖统一数据分析平台bob体育客户端下载简化了数据访问和工程,培育一个协作环境,支持分析和机器学习。作为平台的一部分,砖提供了一个bob体育客户端下载统一的数据服务,确保您的数据管道的可靠性和可扩展性,数据湖泊和数据分析工作流。

的一个主要组件的砖统一数据服务三角洲湖一个开源存储层,将提高数据的可靠性,性能,和生命周期管理您的数据。与改进的数据管理,组织可以开始认为“超越数据湖”,利用更先进的分析技术和技术来扩展他们的下游业务需求包括数据隐私保护和数据CCPA遵从性。

开始构建一个CCPA-friendly数据与三角洲湖湖

湖三角洲湖提供数据和结构化数据管理系统包括事务的能力。这使您能够轻松快速地搜索、修改和清洁你的数据使用标准的DML语句(例如删除、更新合并成)。

开始,摄取你的原始数据与火花api,你熟悉和把他们写成三角洲湖表。这样做也将元数据添加到您的文件。如果你的数据已经在拼花格式,你也可以选择转换镶花的文件以三角洲湖表没有修改任何数据。三角洲使用开放文件格式(拼花)所以没有被锁的担忧可以快速、轻松地将你的数据转换成另一种格式如果你需要。

一旦摄入,你可以很容易地搜索和修改各个记录在你的三角洲湖表。最后一步是使三角洲湖你的真理的单一来源,消除任何潜在的原始数据。这消除了任何挥之不去的记录您的原始数据集。我们建议设立一个保留政策与AWS或Azure 30天或更少的自动删除原始数据,因此不需要采取进一步行动来删除原始消费者数据满足CCPA响应时间。

我在数据删除数据如何使用三角洲湖湖?

你可以找到并删除任何个人信息相关的消费者通过运行两个命令:

1. 删除数据,邮件= '(电子邮件保护)”;
2. 真空数据;

第一个命令标识记录包含字符串“(电子邮件保护)“列中存储的电子邮件,并删除包含这些记录的数据重写相应的潜在消费者的独特的个人数据删除的文件,标志着旧文件删除。

第二个命令清除δ表,删除任何陈腐的记录已经被逻辑删除,在默认的保存期。使用默认的保持期为7天,这意味着文件标记为删除会萦绕在你运行真空命令至少7天后。您可以轻松地设置与安排工作砖作业调度器真空运行命令的自动化。你也可以熟悉三角洲湖的时间旅行功能,它允许你保留历史版本的三角洲湖表如果你需要查询一个表的早期版本。请注意,当您运行真空时,你将失去时间旅行的能力回到一个版本比默认7天数据保存期。

运行这些命令后,您现在可以安全状态,你已经删除了必要的消费者数据,记录数据。

还有什么砖和CCPA消费者权利请求帮助我吗?

一旦用户的个人信息已被删除从数据湖,同样重要的是要把这种个人信息从您的数据团队所使用的工具。这些工具通常驻留在本地数据科学家或工程师的笔记本电脑。一个更好更安全的解决方案是使用砖与托管数据科学的空间数据团队可以准备,探索和模型数据协作共享笔记本的环境。这提高了团队的工作效率,创造一个安全,集中整个环境分析工作流。

帮助你达到CCPA合规要求,砖为您提供永久删除个人信息隐私保护工具,要么各命令或每本级别。

当你删除一个笔记本,它是搬到垃圾。如果你不采取进一步的行动,这将是永久性的30天内删除——让你有信心在规定的时间内被删除CCPA和GDPR。

如果因为任何原因,你需要更快,我们也提供能力永久删除垃圾中的个别项目:

删除所有项目在一个特定用户的垃圾:

或清除删除所有项目在一个工作区命令,包括删除笔记本电池,笔记本评论或MLFlow实验:

你也可以选择清洗砖笔记本的修订历史,这是有用的,以确保永久删除旧的查询结果:

开始使用CCPA合规数据和分析

砖的统一数据分析平台和三角洲湖,你可以带增强的数据安全性,可靠性,性能,和生命周期管理bob体育客户端下载您的数据湖而实现你所有的分析需求。组织现在可以快速找到并删除个人记录数据以满足CCPA湖访问请求和合规需求没有阻碍他们的业务。

BOB低频彩了解更多关于三角洲湖和砖统一数据分析平台bob体育客户端下载。注册你的免费的砖试验现在。